关于Gen10 Plus 方案请教

zhengwenxi1989

     我的gen10 plus现在底层是esxi 7.0U3安装在USB口外置的移动SSD上，上面跑了OpenWrt、黑群、Win10等虚拟机。pcie装的gtx1650显卡和4块硬盘一起直通给黑群使用。问题：
1、外面拖一个USB的外置硬盘总觉得不方便
2、esxi下直通桌面级显卡时，会导至重启虚机后显卡无法工作，只能连esxi宿主机一起重启，虽然重启次数很少，但总是不方便

网上看了些资料，据说PVE可以装在sata控制器下的1块硬盘上，然后将另外3块直通给群晖，这样的话就不用外置系统盘了。另外显卡的问题也能解决，请问有高手这样玩过吗，

shadow404

可以把黑裙外挂出来给esxi当存储，这样就只需要一个USB3.0的U盘做ESXI系统+存放黑群的引导。

zhengwenxi1989

shadow404 发表于 2022-10-27 10:31
可以把黑裙外挂出来给esxi当存储，这样就只需要一个USB3.0的U盘做ESXI系统+存放黑群的引导。 ...

感谢回复，这样应该可以，不过感觉问题可能容易比较多。另又咨询了些用的人，pve也是不可以直通和系统盘在同一控制器下的硬盘的

hjnjut

qem直通可以实现你这样的效果，不过esxi应该也可以这种直通方式的

brucelee1126

黑裙的系统能接管显卡吗

brucelee1126

RedMomoe 发表于 2022-10-27 11:43
直通就行

我的意思是群晖的系统能正常调用nv的显卡吗

brucelee1126

RedMomoe 发表于 2022-10-27 12:13
直通了，显卡就归群晖系统控制了，为什么不能正常调用？

这个我不清楚，但是群晖的系统并没有接显卡的界面啊，群晖的web界面是怎么显示显卡的信息的，群晖的系统带不带显卡的驱动，方便的话给我截张图

brucelee1126

RedMomoe 发表于 2022-10-27 13:06
驱动可以自己装。群晖调用显卡，无非就是为了解码。命令行就能看是不是识别了显卡！为什么要web界面看？ ...

你有黑裙用独显的案例没，我刚大略搜了一下，没搜到，你说群晖的新系统自带nv驱动？是什么机型？

brucelee1126

RedMomoe 发表于 2022-10-27 13:39
DVA3219

完全不了解，另外能给个黑裙上独显的案例或者教程么

zhengwenxi1989

brucelee1126 发表于 2022-10-27 13:47
完全不了解，另外能给个黑裙上独显的案例或者教程么

DVA3221，这个机型国内没有销售，自带8个监控许可，装plex可以用显卡硬解，可以人工智能，比如人流计数、入侵检测等

shadow404

zhengwenxi1989 发表于 2022-10-27 11:22
感谢回复，这样应该可以，不过感觉问题可能容易比较多。另又咨询了些用的人，pve也是不可以直通和系统盘 ...

esxi还有一个方法，就是RDM，可以实现单块硬盘直通，但是SMART会有点点影响，然后不能休眠硬盘，不过NAS一般也不会休眠吧（至少我从来不休眠。。。）

szeller

shadow404 发表于 2022-10-27 14:45
esxi还有一个方法，就是RDM，可以实现单块硬盘直通，但是SMART会有点点影响，然后不能休眠硬盘，不过NAS ...

RDM硬盘性能比直通SATA控制器差一些

鱼鱼鱼1

zhengwenxi1989 发表于 2022-10-27 11:22
感谢回复，这样应该可以，不过感觉问题可能容易比较多。另又咨询了些用的人，pve也是不可以直通和系统盘 ...

可以的。pve可以直通单个硬盘。我就是这么搞的。都是一个sata控制器下面的盘。

zhengwenxi1989

鱼鱼鱼1 发表于 2022-10-27 16:12
可以的。pve可以直通单个硬盘。我就是这么搞的。都是一个sata控制器下面的盘。 ...

你这样直通的盘应该不是真正的直通，和esxi里的rdm差不多吧，进系统能看到这块盘的smart吗

鱼鱼鱼1

zhengwenxi1989 发表于 2022-10-27 16:16
你这样直通的盘应该不是真正的直通，和esxi里的rdm差不多吧，进系统能看到这块盘的smart吗 ...

不能，smart我是用pve的在管理。 。黑群和pve其中一个能预警就够了。没必要一定是黑群吧。

zhengwenxi1989

鱼鱼鱼1 发表于 2022-10-27 16:36
不能，smart我是用pve的在管理。。黑群和pve其中一个能预警就够了。没必要一定是黑群吧。 ...

据说这样性能会差很多，你试过没

鱼鱼鱼1

zhengwenxi1989 发表于 2022-10-27 16:48
据说这样性能会差很多，你试过没

不清楚，我没做raid.黑群都是单盘basic.网口是2个千兆汇聚。没感觉性能差很多。

zhengwenxi1989

鱼鱼鱼1 发表于 2022-10-27 16:49
不清楚，我没做raid.黑群都是单盘basic.网口是2个千兆汇聚。没感觉性能差很多。 ...

你可以拷数据试下

vonsy

我现在是一个ssd 960G, 一个hdd 18T, 都是vmdk, ESXi和虚拟机系统都安装到ssd vmdk上, pt数据在hdd vmdk上.
装了nvidia t600显卡,直通给ubuntu供plex转码用.(重启虚拟机,没发现会影响直通)

最近还想把ESXi安装到机器内部USB2.0优盘. 虚拟机系统安装到外部USB3.2优盘中, ssd和hdd控制器直通给OpenMediaVault虚拟机管理存储和nfs/smb共享.

鱼鱼鱼1

zhengwenxi1989 发表于 2022-10-27 16:55
你可以拷数据试下

copy数据150-200多。ssd上读写能跑满2千兆网口。机械不行。盘比较小都是6t,8t的小盘，单盘读写就那么快。我盘上都是些电影，音乐，速度对我没影响。

brucelee1126

zhengwenxi1989 发表于 2022-10-27 14:15
DVA3221，这个机型国内没有销售，自带8个监控许可，装plex可以用显卡硬解，可以人工智能，比如人流计数 ...

这是你gen10上跑的？还是白的？

yoakam

个人建议尝试
a.gen10 plus 改用window 10 或server做主机系统
b.黑裙的功能拟购买入门级不需要太多盘位只是为了群晖套件只是为了服务。存储依旧是主机系统win10或server，可以共享给群晖。
c.pcie装了显卡不知道还能不能装一个pcie插槽的ssd，nvme的请务必查看浦科特的M8Pe(Y)我只知道这个带Y的（有新款），能兼容大部分系统启动。
d.openwrt可以在window的虚拟机跑服务，主路由请使用成品。
总结一下，建议的优势：系统熟悉不需要太多的折腾，显卡能直接用不需要考虑太多，硬盘也直通了。openwrt、黑裙要的是服务，服务挂了也不影响全部。主路由一般不需要太折腾跑满带宽有公网ip就行了。
更新一下，pcie插槽只有一个。短的只能用于iLO 扩展卡。 pcie可以分割，有m.2+网卡估计也塞不下。显卡和m.2共存要看分割。

pp0pp

vonsy 发表于 2022-10-27 17:00
我现在是一个ssd 960G, 一个hdd 18T, 都是vmdk, ESXi和虚拟机系统都安装到ssd vmdk上, pt数据在hdd vmdk上. ...

装了T600显卡以后，BMC的发热情况怎么样呢？

zhengwenxi1989

brucelee1126 发表于 2022-10-27 19:58
这是你gen10上跑的？还是白的？

是的，

neilyo_wang

如果显卡不是刚需, 可以用PCIE拆分卡  最多支持 4 NVME SSD

ESXi 可以安装在内置的 TF/ USB槽上,  外置SSD 可以接到这个 内置USB槽?

VM 存储盘 可以外挂 iSCSi 网络共享SSD

zhengwenxi1989

neilyo_wang 发表于 2022-10-28 11:06
如果显卡不是刚需, 可以用PCIE拆分卡  最多支持 4 NVME SSD

ESXi 可以安装在内置的 TF/ USB槽上,  外置SSD ...

就是想上显卡才这么折腾的，以前就是nvme直装装在pci中就完事了。晚上测试下有群晖iscsi共享空间给esxi看效果如何