HP GEN8万兆+RAID卡双PCIE设备无损改装——低成本CPU自带PCIE拆分方案

wxcup

seemeagain 发表于 2024-6-13 06:45
現在折騰基本結束，出現一些問題，還望樓主解惑。
1,拆分卡插上m2還是u2，用工具都看不到smart信息，即使用 ...

问题1我个人猜测可能PLX拆分卡的嫌疑比较大，可以测试一下是否跟DMA设置或者PLX卡的固件有关系。

问题2类似的现象在我这里貌似没有出现，转接的RAID卡测速4块RAID5 SATA SSD速度是正常的，读取最高速度可以到2.4GB/s左右；
当然E3的cpu可能也会有掣肘，毕竟使用的还是DDR3内存，我实测发现25G的网卡测速的时候CPU已经满载，但是仍然跑不满25G的网卡带宽。
M.2和U.2测速的问题暂时也不能排除PLX拆分卡的嫌疑，建议把PLX卡拿到别的类似平台电脑上测一下看看；
另外这个测速数据看着读取速度大概2GB/s不到，检查一下m2和u2 nvme盘是否协商成了pcie2.0的速率；


问题3建议用下图的pcie转U.2的转接卡（售价40元左右）来测试，因为8654转U.2的线更贵，兼容性也要差一些。

lasx

wxcup 发表于 2024-6-13 05:47
最近入气温升的很快，会不会是那个PLX的拆分卡过热了？
我这个gen8已经稳定运行100天了，没有任何问题， ...

我怕热，插的一个rtl双2.5G+ssd的卡，没有plx芯片。出现两次亮红灯的情况了。

wxcup

lasx 发表于 2024-6-13 12:08
我怕热，插的一个rtl双2.5G+ssd的卡，没有plx芯片。出现两次亮红灯的情况了。 ...

某鱼上好像见过这种拆分一体式的卡，这类卡上貌似没有retimer的芯片，所以信号完整性会差一些，pcie信号容易被干扰，可能会导致ilo里面报错闪红灯。
建议选择有retimer芯片的拆分卡或者质量更好一点的一体卡

lasx

wxcup 发表于 2024-6-13 12:23
某鱼上好像见过这种拆分一体式的卡，这类卡上貌似没有retimer的芯片，所以信号完整性会差一些，pcie信号 ...

报错就崩了。正在找问题，拆分应该是拆分出来了。崩掉就是始料未及。

TickingClock

牛逼~ 这个早期就查过，奈何没有。 现在还有个内存问题，是不不是那一天也能解决，gen8 永垂不朽~

lasx

wxcup 发表于 2024-6-13 12:23
某鱼上好像见过这种拆分一体式的卡，这类卡上貌似没有retimer的芯片，所以信号完整性会差一些，pcie信号 ...

大概问题找到了，直通了网卡给openwrt，openwrt关机时问题复现，直接亮红灯。其它网口也不能访问到esxi，只能重启主机。

seemeagain

今天上午到了一根8654轉雙頭的8639連接線，直接連在ocp卡上的8654接口，不管怎麼折騰就是看不到p4510，直接退了，趕緊又去網購pcie轉9639,pcie轉8643,8654轉單頭的8639,還加了一塊帶拆分的pcie轉8643,順帶購買運費險，來最後一次驗證那個更好適配gen8

tlwz

lasx 发表于 2024-6-15 16:30
大概问题找到了，直通了网卡给openwrt，openwrt关机时问题复现，直接亮红灯。其它网口也不能访问到esxi， ...

能不能pm下你卡的连接，我也想搞一个。

tlwz

wxcup 发表于 2024-2-28 17:40
没关系，你可以再仔细看看然后自己尝试一下，我本来也是打算搞8+4+4拆分的；

因为我原本是买的是OCP+双N ...

楼主，请教一下这个卡用gen8的拆封8+8是直接不能用，还是2个网卡能用，一个nvme能用？

seemeagain

tlwz 发表于 2024-6-16 17:40
楼主，请教一下这个卡用gen8的拆封8+8是直接不能用，还是2个网卡能用，一个nvme能用？ ...

直接拆分8+8都能用。一個接ocp網卡，一個接hba卡掛ssd。也可以其中一個掛其他pcie設備，比如pcie轉m2。

wxcup

tlwz 发表于 2024-6-16 17:40
楼主，请教一下这个卡用gen8的拆封8+8是直接不能用，还是2个网卡能用，一个nvme能用？ ...

这块卡实测是双口万兆网卡和一个nvme可用，另一个nvme走单独的x4带宽所以在x8x8拆分下认不到；

tlwz

wxcup 发表于 2024-6-17 06:13
这块卡实测是双口万兆网卡和一个nvme可用，另一个nvme走单独的x4带宽所以在x8x8拆分下认不到； ...

再请教一下。如果有就想实现万兆和再用这个nvme转成sata，放3块sata的ssd，是用这个卡加个nvme转sata的卡，还是有更好的方案呢？

tlwz

wxcup 发表于 2024-6-17 06:13
这块卡实测是双口万兆网卡和一个nvme可用，另一个nvme走单独的x4带宽所以在x8x8拆分下认不到； ...

再就是能不能把你用的全套改装的pm个链接，谢谢。

wxcup

tlwz 发表于 2024-6-17 07:59
再请教一下。如果有就想实现万兆和再用这个nvme转成sata，放3块sata的ssd，是用这个卡加个nvme转sata的卡 ...

那就买个PCIE的HBA卡就可以了，服务器拆机的3008之类的卡几十块钱一块，比M.2转SATA的卡便宜而且性能还更好，一般都可以支持最多8块SAS或SATA硬盘，比M.2转sata的卡最多6块盘数量更多；

wxcup

tlwz 发表于 2024-6-17 08:18
再就是能不能把你用的全套改装的pm个链接，谢谢。

已私信，请查收

lasx

tlwz 发表于 2024-6-16 16:37
能不能pm下你卡的连接，我也想搞一个。

咸鱼上找一下就有 200左右，可以用2个2.5G和一个nvme。

sj100d

感觉gen8  可以当传**了

nofateyang

时隔多年，现在又开始折腾了，哈哈。

seemeagain

总结一下，这段时间折腾gen8的得到的一些数据，用不同配件对牙膏厂的P4510的读写测试，是个人的娱乐跑分 。

绿板

黑板

8718

8747

1，E3-1220Lv2在短接针脚后在HWinfo虽然能显示通道拆分成功，但用crystaldiskinfo不能检测出通道上的SSD，而资料管理器能显示SSD，用crystaldiskmark测试跑分偏低，严重怀疑短接针脚有很大问题（这个等以后测试）。
2，先后用4个cpu分别测试的数据,g1610t，E3-1220Lv2，E3-1265Lv2，12700k性能越强，对写入数据也越高。
3，拆分卡在性能较弱的cpu对数据写入有很大加成。
4，在cpu中直接短接针脚拆分会对数据读写有一些轻微影响。
5，如果g1610t能够实现拆分通道（未经证实），那是最好的，读取数据差不多，写入有拆分卡加成，真不输e3-1265Lv2。

wxcup

seemeagain 发表于 2024-6-21 12:35
总结一下，这段时间折腾gen8的得到的一些数据，用不同配件对牙膏厂的P4510的读写测试，是个人的娱乐跑分 。 ...

感谢分享，非常详实的测试数据，给你点赞！
Celeron G1610T在intel官网上看到的资料理论上是可以拆分成x8x8和x8x4x4的，只不过现在不确定HPE GEN8的bios是否支持除X8X8以外的拆分方式；
还有这个8474的卡应该少了两个8643的插座吧?要是补齐的话不知道能不能跑满4个U.2的ssd；

seemeagain

wxcup 发表于 2024-6-21 14:17
感谢分享，非常详实的测试数据，给你点赞！
Celeron G1610T在intel官网上看到的资料理论上是可以拆分成x8 ...

拆分卡上有四个的8743接口，只是挂4个U2代价不低，我只好用不那么多。
那么说G1610T还真有拆分可能。

wxcup

seemeagain 发表于 2024-6-21 14:36
拆分卡上有四个的8743接口，只是挂4个U2代价不低，我只好用不那么多。
那么说G1610T还真有拆分可能。 ...

理论上看是可以拆分的，只要都是115X接口的cpu就行；

VincentHu

我现在这套，就是当年卖了一个中高配gen8的钱换来的哈哈
当时gen8我感觉有点吵了  那个自带风扇和电源风扇，声音有点猛  
我这个屋子小，听得比较清楚   

qqnmb

有PCIE 拆分卡的链接吗，谢谢大佬分享~

wxcup

qqnmb 发表于 2024-6-24 15:03
有PCIE 拆分卡的链接吗，谢谢大佬分享~

已私信，请查收

tspine01

wxcup 发表于 2024-6-24 15:42
已私信，请查收

能否PM我一个链接

wxcup

tspine01 发表于 2024-6-25 22:04
能否PM我一个链接

已私信，请查收

corochristmas

我记得B站有专栏介绍了从3代到12代屏蔽针脚实现pcie拆分的^

mwt0531

新人来支持，入手了gen8在折腾中

wxcup

mwt0531 发表于 2024-7-2 09:58
新人来支持，入手了gen8在折腾中

恭喜入坑，期待折腾成功后的分享！