硬盘扩展开求助

WD5d · 发表于 2023-7-10 22:10

自建NAS对硬盘扩展卡有一个需求,涉及到虚拟化直通请教一下

1.只能插一个半高卡
2.需要能分别直通给2个虚拟机(每个虚拟机2-3块硬盘)
3.支持主流虚拟化平台,ESXi和常见操作系统驱动
4.不需要RAID功能(可以有)

在此基础上越便宜越好,接受洋垃圾

大佬们有啥推荐的么?特别是第二条

jcvc · 发表于 2023-7-10 22:34

那些寨的sata扩展卡就不推荐了，使用都不稳定

去买些洋垃圾直通卡sas 6g的lsi 2308最高支持esxi 6.7，sas 12g的lsi 3008支持esxi7和8，sata的盘也是支持的

直通的话可以直通硬盘，不需要把直通卡直通

WD5d · 发表于 2023-7-10 22:36

本帖最后由 WD5d 于 2023-7-11 00:57 编辑

jcvc 发表于 2023-7-10 22:34
那些寨的sata扩展卡就不推荐了，使用都不稳定

去买些洋垃圾直通卡sas 6g的lsi 2308最高支持esxi 6.7，sas ...

我又搜索了一下
RDM直通方式可以直通任意硬盘,但是我需要的是真正的直通,好像只能按照控制器来直通
似乎还是必须要一张卡具备2个控制器才可以

jcvc · 发表于 2023-7-11 09:14

WD5d 发表于 2023-7-10 22:36
我又搜索了一下
RDM直通方式可以直通任意硬盘,但是我需要的是真正的直通,好像只能按照控制器来直通
似乎 ...

其实直通硬盘就可以了，没有必要把卡也直通吧？那就要插好多卡？

tsaotse · 发表于 2023-7-12 09:05

sas2308比sas3008便宜多了，坏了也不心疼。

aiyaya2004 · 发表于 2023-7-12 09:12

(鸡。。嘉)有一款阵列卡，可以刷直通，应该能满足你的要求，可以去了解一下
MSLZ2可扩展8个SAS或者8个SATA，可SATA或者SAS混用。
刷好直通，你可以在虚拟机里直接分配你要直通的硬盘给相对应的虚拟机即可。
PCI-E X8接口，SATA单口6G
应该闲鱼能找到，100块以内搞定。

Icarus_Radio · 发表于 2023-7-12 09:51

第二个需求一个直通卡是没法做到的。我用的是PVE，就算直通硬盘给虚拟机，硬盘的SMART信息虚拟机是读不到的。想读到只能直通整个卡。
如果你只有两个虚拟机要直通硬盘有个办法，一部分插主板的SATA接口，一部分接直通卡。然后分别把主板的SATA控制器和直通卡分配给两个虚拟机。
直通卡去闲鱼买2008，五六十吧，很便宜的

Mufasa · 发表于 2023-7-12 10:05

一块卡直通给两个虚拟机，ESXi做不到。

PVE我没试过。

WD5d · 发表于 2023-7-12 11:49

Icarus_Radio 发表于 2023-7-12 09:51
第二个需求一个直通卡是没法做到的。我用的是PVE，就算直通硬盘给虚拟机，硬盘的SMART信息虚拟机是读不到的 ...

感谢,看来这是一个办法

jimmyjin · 发表于 2023-7-13 18:22

jcvc 发表于 2023-7-11 09:14
其实直通硬盘就可以了，没有必要把卡也直通吧？那就要插好多卡？

esxi RDM 直通或者PVE的 by-path 直通，不能让硬盘休眠的
直通控制器的话，只要控制器可以休眠，那么就能让硬盘休眠

我也是家用直通控制器党，虚拟黑裙还做了自动休眠后关机，这样基本把虚拟机当定期冷备服务器用了

jcvc · 发表于 2023-7-13 21:10

jimmyjin 发表于 2023-7-13 18:22
esxi RDM 直通或者PVE的 by-path 直通，不能让硬盘休眠的
直通控制器的话，只要控制器可以休眠，那么 ...

原来如此，学习了

那2308或3008支持休眠不？

jimmyjin · 发表于 2023-7-13 22:49

jcvc 发表于 2023-7-13 21:10
原来如此，学习了

那2308或3008支持休眠不？

不知道，我不用这些。为了8个SATA口，搭进去PCIex8 对我来说太奢侈了。
PCIex8要留给万兆网卡和U2 设备。
我就知道ASM1064 之流都支持，
是的，我就是那个一直用"不靠谱"的taobao SATA卡的

，还是从Key A+E 转的PCIex1 再接ASM1064 4个SATA，就为了充分利用这个wifi 卡用的PCIe3.0 x1。把ITX板的其他PCIe/m.2 都给U2

另外，我PVE的经验， ASM1064和JML582的卡直通能休眠但是不能做到自动关机。
我只有直通intel 板载SATA控制器才能让黑裙自动关机

netfood · 发表于 2023-7-13 23:31

本帖最后由 netfood 于 2023-7-13 23:42 编辑

用Windows系统做底层，阵列卡做硬件RAID，硬盘划分成几个卷，用VMware 虚拟黑裙，直接加载物理卷，很稳妥啊。
不用考虑NAS和卡的兼容性，也比直通忙不了多少，况且还可以做硬件RAID，多省事啊。

无标题.png

上图就是实际生产环境的截图

磁盘0 就是 4块SAS 3TB的RAID5 卷给NAS A
磁盘2 就是一块SATA 1TB的磁盘，单独给NAS B
2个NAS系统稳妥运行，主机还能干点其他的，多爽。

netfood · 发表于 2023-7-13 23:50

另外给你一个黑群的启停脚本

开机

"C:\Program Files (x86)\VMware\VMware Workstation\vmrun.exe" start "D:\NASA\DS3622Xs.vmx" nogui

复制代码

最新版本的Vmware支持开启自启动，脚本可以省略

关闭

"C:\Program Files (x86)\VMware\VMware Workstation\vmrun.exe" suspend "D:\NASA\DS3622Xs.vmx"

复制代码

dcl2009 · 发表于 2023-7-14 00:34

jcvc 发表于 2023-7-11 09:14
其实直通硬盘就可以了，没有必要把卡也直通吧？那就要插好多卡？

必须把卡直通，有一些主板用RDM直通硬盘给群晖，过几天必出问题，认不到盘，重启显示损坏

dcl2009 · 发表于 2023-7-14 00:41

楼主可以试试NVME转5SATA卡，我这边用了一年，直通给群晖很稳，或者用9215半高卡，用了几年也很稳

JMB582 NVME转2SATA我这边测试不稳，容易无响应，不直通没事

很久以前用的是9217半高卡，也很稳，后来实在受不了高温高功耗就换了上面说的俩卡，几乎没温度

tyy474 · 发表于 2023-7-14 08:54

我个人建议别整那些小机箱小主板，大板才是归属，人心是贪的，看到别人各种扩展加装，很容易的就上头了，到时候又是一顿折腾。有大板，良好的扩展，优秀的散热，布局走线也方便。一个优秀的主板能极大减少折腾过程中各种莫名其妙的error问题

jcvc · 发表于 2023-7-14 09:15

dcl2009 发表于 2023-7-14 00:34
必须把卡直通，有一些主板用RDM直通硬盘给群晖，过几天必出问题，认不到盘，重启显示损坏 ...

我是3008直通卡，直接rdm硬盘，很稳噢，一年多了，没有出现不认盘的情况，但是休眠这个确实没有关注

tmdodd · 发表于 2023-7-14 09:23

想到的一个答案：
半高pcie拆分成两个或多个m2，再用m2转sata，这样应该可以直通控制器。

dcl2009 · 发表于 2023-7-14 12:06

jcvc 发表于 2023-7-14 09:15
我是3008直通卡，直接rdm硬盘，很稳噢，一年多了，没有出现不认盘的情况，但是休眠这个确实没有关注 ...

AMD的个别主板容易出现我说的那个情况，比方说B450+5950x，A520+5600G，我都遇到了，B650M+7950x没遇到过，intel的没遇到过

无聊的五月 · 发表于 2023-7-14 13:26

ESXI支持直接添加裸盘进去呀

WD5d · 发表于 2023-7-18 12:50

netfood 发表于 2023-7-13 23:31
用Windows系统做底层，阵列卡做硬件RAID，硬盘划分成几个卷，用VMware 虚拟黑裙，直接加载物理卷，很稳妥啊 ...

不瞒你说...我就是不想做硬件RAID所以才需要直通的...

目前就是准备做一下软件的RAID1

RyanLR · 发表于 2023-7-18 14:29

不限制版型那选择余地很多了，
扩展卡优选9211这种sas6g的，不要用3008，用不到的性能都是热量，都是灰尘，都是烦躁

netfood · 发表于 2023-7-18 23:43

WD5d 发表于 2023-7-18 12:50
不瞒你说...我就是不想做硬件RAID所以才需要直通的...

目前就是准备做一下软件的RAID1 ...

硬件RAID的稳定性好很多，而且重建数据时不占用CPU资源啊

账号		自动登录	找回密码
密码			加入我们

[NAS] 硬盘扩展开求助