找回密码
 加入我们
搜索
      
查看: 3878|回复: 8

[网络] 544网卡,做了几个简单的测试

[复制链接]
发表于 2024-2-2 23:19 | 显示全部楼层 |阅读模式
本帖最后由 Illidan2004 于 2024-2-2 23:22 编辑

之前我也在版上也问过几个问题,这次有条件做了简单的测试。

我考虑的使用场景:
想要在常用PC的主板上插上一张高带宽网卡,其中一个口可以和PC NAS直连,另一个口连交换机万兆口进行其它常规高速通信。


几个问题:

1、544网卡是3.0x8的,在3.0x4下能达到多少带宽?对于非Threadripper/WorkStation主板,如果两个x8都用掉了,那么只剩下x4可以用了。
2、544网卡能不能接万兆交换机?
3、交换机是的万兆光口插入万兆光模块,由于光万兆通常只支持1G/10G协商,那么与另一个2.5G的口之间互相传输数据的时候,传输带宽是能拉满2.5G,还是限制或者协商到1G?


测试机器:
(1)7950X3D+MSI X670E Carbon,544网卡+8x的FLR转接卡,插在芯片组的PCIEx4上
(2)7950+千兆字节B650I AORUS Ultra,544网卡+4x的FLR转接卡,插在唯一的PCIEx16上
(3)QSFP-QSFP 40Gb 1米 DAC直连线(拆机货)
(4)兮克SKS7300-8GPYXGS交换机(8口2.5G,4口SFP+),兮克10G单模双纤LC接口模块SKMD-10G-10KM,LC-LC单模双芯光纤跳线
(5)Mellanox MAM1Q00A QSFP转SFP转接头,Mellanox单模双纤MFM1T02-LR-F-A1万兆模块(均为拆机货)


第一个问题测试结果,iperf3单线程12.5Gbits/s,iperf2十线程22.0Gbits/s,可能有误差,也因为FLR转接效率问题或者X670芯片组问题可能稍低,但是基本上也可以看到,要发挥出40G带宽,至少需要X8,否则理论性能也就是32G加上网络传输各种损耗打个八折,可能就低于25G了,可见X4接口下25G网卡已经够用,目前可能CX4121a和CX542b(OCP,需要折腾)是比较好的选择,当然不排除25G也有损耗还会更低一些,年后再测试测试看。

第二个问题,因为40G QSFP接口其实就是由4个10G通道汇总得到的,我在网上找到Mellanox的MAM1Q00A QSFP转SFP转接头,很多人说这种只能用于交换机,我查了NVIDIA官网,文档里是说支持CX3系列网卡的,因此就买来试了下,插到网卡上,然后用光纤连到兮克交换机的光口,成功协商10G。把另一台电脑也这样连上,两台之间iperf测速能达到10G,说明这个方案能够用40G网卡连接万兆交换机用。至于25G 网卡SFP28接口是否可以直接用10G SFP+光模块连接交换机,就待后续折腾测试了,这个根据版上网友的经验,应该可行性比40G这个还要高。

第三个问题,把一台电脑的40G网卡其中一个口按照上面方式连接交换机的SFP+口,另一台电脑2.5G网口网线连接交换机,两台之间iperf测速能达到2.5G,这个应该就是只看交换机的背板速率的,然后分别被每个口和交换机协商的速度限制,而和交换机上面连接的几个口之间没有协商关系。
发表于 2024-2-3 00:17 来自手机 | 显示全部楼层
pcie3.0x4带宽是32GT/s,可以跑三个半10g流。对你的应用来讲,带宽是够了。
发表于 2024-2-3 01:10 | 显示全部楼层
40G拆成4个10G,是为了接入局域网?
 楼主| 发表于 2024-2-3 09:39 来自手机 | 显示全部楼层
summerq 发表于 2024-2-3 00:17
pcie3.0x4带宽是32GT/s,可以跑三个半10g流。对你的应用来讲,带宽是够了。

各种效率损失 可能要打个8折。不过Windows拷贝本来就只有10g多。。
 楼主| 发表于 2024-2-3 09:40 来自手机 | 显示全部楼层
zxy2001 发表于 2024-2-3 01:10
40G拆成4个10G,是为了接入局域网?

没有试过拆分线,只试了转换模块,可以用。接入局域网。
发表于 2024-2-3 10:22 | 显示全部楼层
感觉装完新硬件,最好重装系统,UEFI里才包含新硬件的驱动
发表于 2024-2-3 12:46 | 显示全部楼层
Illidan2004 发表于 2024-2-3 09:40
没有试过拆分线,只试了转换模块,可以用。接入局域网。

谢谢,理解错了,还以为用了一拆4的那根线。。。应该是不能用的。。
发表于 2024-2-3 13:53 来自手机 | 显示全部楼层
可以试试刷成56g再测速度,貌似x4也有一点点提升
 楼主| 发表于 2024-2-3 15:54 | 显示全部楼层
weindy 发表于 2024-2-3 13:53
可以试试刷成56g再测速度,貌似x4也有一点点提升

年后空了再试试
您需要登录后才可以回帖 登录 | 加入我们

本版积分规则

Archiver|手机版|小黑屋|Chiphell ( 沪ICP备12027953号-5 )沪公网备310112100042806 上海市互联网违法与不良信息举报中心

GMT+8, 2024-12-22 12:50 , Processed in 0.008416 second(s), 4 queries , Gzip On, Redis On.

Powered by Discuz! X3.5 Licensed

© 2007-2024 Chiphell.com All rights reserved.

快速回复 返回顶部 返回列表