带有4121a的网卡的win11开机后有概率瘫痪傻瓜交换机

xiaol1n7

困扰我挺久的一个问题了，实在没有思路，来见多识广的chh求助一下

先讲一下环境

电脑系统win11 23h2，网卡hpe的cx4121a-xcat（自己按别人的教程改了25g），网卡插在了pch的x4槽上
这个网口是配置是dhcp，由家里的软路由下发ip和dns啥的
交换机是磊科的gs10，有两个万兆口，一个上联到家里的万兆交换机，一个连接到cx4，用的是aoc sfp+，握手速度是10gbps

故障是这台电脑开机的时候，有一定概率整个交换机上的设备都没网，但是家里的万兆交换机是正常工作的，插拔一次aoc就没问题了
也不是百分百能复现，因为一天最多开关两三次机器，有时候手动插拔一次就好了
如果是在超频这种频繁开关机的情况下就很容易复现，整个交换机下的设备都没网了

最奇怪的是前面九点多的时候在没有开关机的情况下，这个交换机也没网了，插拔一次就没事了

交换机是傻瓜交换机，自己试过更换两个万兆口的顺序，问题依旧
这个交换机网口指示灯是定期闪烁的，也没办法看出来当前使用情况
联系了官方售后，他们的工程师说也没有好的办法，只能有问题的时候再联系再来抓包看看？

网卡的温度不高，用命令行看了一下没超过50度，大部分时间45-50之间徘徊，有一个t30对着散热片吹的

win设置里每一个网卡都没有开启internet共享，应该也不是环路，没问题的时候整个内网延迟都是正常的

软路由里没看到这个ip没有其他的冲突，这个mac只和一个ip对应

xiaol1n7

手打一下设备管理器里的cx4网卡的属性，没有动过，但是还是贴上来看看
dcbxmode firmware in charge
devx enable 不存在
disable local loopback flags 不存在
dscp value of roce rtt response 不存在
encapsulated task offload enable
encapsulation overhead 0
flow control rx&tx enabled
interrupt moderation enabled
ipv4 checksum offload rx&tx enabled
jumbo packet 1514
large send offload v2 (v4+v6) enable
maximum number of rss process&queues 8
multipriosq enabled
network address 不存在
network direct maximum transmission 1024
networkdirect functionality enabled
networkdirect technology 不存在
nvgre encapsulated task offload enabled
packet direct enabled
preferred numa node 65535
priority & vlan tag both enabled
ptp hardware timestamp enabled
quality of service enabled
receive buffers 512
receive completion method adaptive
receive side scaling enabled
recv segment coalescing (v4+v6) enabled
rss base processor number 0
rss load balancing profile closest processor
rx interrupt moderation profile adaptive
send buffers 2048
send completion method interrupts
sriov enabled
tcp/udp checksum offload (v4+v6) rx&tx enabled
tx interrupt moderation profile moderated
udp segmentation offload (v4+v6) enabled
virtual machine queues enabled
virtual switch rss enabled
vlan id 0
vmq vlan filtering enabled
vxlan encapsulated task offload enabled
vxlan udp destination port number 4789

xiaol1n7

另外hpe这个cx4121a在永擎的c246主板上无法开启sriov，官方文档和其他人的笔记都看过了，开了8个就分不出vf来，开5个的话能分出vf，lspci能看到，但是把vf非给虚拟机的话整个虚拟机就无法启动了，提示找不到pcie设备，lspci看了一下确实原本分出来的vf都没有了

但是这块板子上intel的x550的vf一点问题都没有，打开即用

两个cx4都有问题，我都不知道是我的原因还是卡的原因了

各位老哥有思路的话请细说，谢谢

文泰来

换一个网卡试试呗，多简单的事

hp5152688

换 DAC 线试试

xiaol1n7

文泰来 发表于 2024-11-17 23:13
换一个网卡试试呗，多简单的事

前段时间想换542b的，因为散热原因纠结了几天，542b直接从200涨到300了。。。
我先换dac线看看，再不行换其他4121试试

peterhello

我和你几乎一样的配置，两块cx4121a分别在主机和nas上，兮克4*25.G+2*10G带管理的，用的DAC线，稳定没有问题

summerq

xiaol1n7 发表于 2024-11-17 23:00
另外hpe这个cx4121a在永擎的c246主板上无法开启sriov，官方文档和其他人的笔记都看过了，开了8个就分不出vf ...

我遇见过类似问题。sriov最多开6个。这是主板bios的问题。无解。用一张卡换主板就没问题

gasment

我有两张戴尔的，都刷了25G固件，用在C246和z690上，从23h用到24h没出过毛病，不过用的是华为的光模块和捡的n手企业交换机;

xiaol1n7

summerq 发表于 2024-11-18 02:52
我遇见过类似问题。sriov最多开6个。这是主板bios的问题。无解。用一张卡换主板就没问题 ...

最奇怪的是同一块板子，intel的x550可以无痛直接开，但是cx4就是不行
两个唯一的区别是x550在pch上，cx4接在cpu通道上

zyyuyu

见过类似故障，光纤收发器故障干翻了傻瓜交换机，傻瓜交换机的灯一个一个灭，10秒后再整体亮，然后再一个一个灭。换光纤收发器后恢复。还有就是一个万兆网卡，怼翻了，二层交换（默认设置，全部端口都是vlan1）从AOC线换DAC线后正常。都是和光电转换有关。

rx_78gp02a

xiaol1n7 发表于 2024-11-18 14:25
最奇怪的是同一块板子，intel的x550可以无痛直接开，但是cx4就是不行
两个唯一的区别是x550在pch上，cx4 ...

VF会占用地址空间，有的bios预留的地址不够。11代之前的平台（包括E3)缺少ACS等支持，会导致SRIOV异常，但是可笑的是PCH对ACS的支持是完整的，没错，intel就是这么拉，AMD是反过来，CPU支持完善但是PCH拉跨。

xiaol1n7

rx_78gp02a 发表于 2024-11-18 14:32
VF会占用地址空间，有的bios预留的地址不够。11代之前的平台（包括E3)缺少ACS等支持，会导致SRIOV异常， ...

谢谢，算是解惑了，换板子成本太高，还是将就着用用10g口的vf吧

xiaol1n7

zyyuyu 发表于 2024-11-18 14:32
见过类似故障，光纤收发器故障干翻了傻瓜交换机，傻瓜交换机的灯一个一个灭，10秒后再整体亮，然后再一个一 ...

最糟心的是这个交换机它不根据端口状态闪灯，只要有连接就定时闪，一秒闪一回，我都没法从灯的外表观测出里面的状态，麻了
谢谢提供的思路，我先换线试试