【已破案】群晖万兆内网下只有300M/S的问题

131CC6A

群晖的型号是DS923+ 万兆网卡是原装的 硬盘为四盘HC550 16T组的RAID 5 另外加了两条1T的SSD做读写缓存 windows下无论是上传还是下载单个大文件都是前几秒能达到600M/S 但后续持续速度只有300M/S左右 且波动很大 windows的网卡型号是X550-T2 请教一下各位大佬这是什么问题？

已做的排查措施以及一些情况汇报：

1. NAS 交换机 主机均已开启巨型帧 并且MTU设置的9000 网卡节能关闭

2. 根据chh上另一位大佬的帖子 已经关闭IPV6 速度仍然上不去

3. 怀疑过网卡或者交换机过热 加了主动散热模块 没有改善

4. SPEEDTEST以及IPERF3均测试过 都能跑满万兆

5. 内网环境从网页登陆群晖下载文件 速度只有100M/S

6. 网线为泛达的超6 并且换了两三根了 应不存在瓶颈

麻烦各位大佬帮帮忙了，小弟在此谢谢各位大佬

【已破案】群晖在DSM7系统更新之后取消了SSD缓存跳过连续I/O的选项，现在的群晖加装SSD缓存只能加速随机IO，无法加速单个文件的连续IO，所以300MB/S的速度就是4盘机械R5的速度.....

ShermanLi

兄弟，我跟你情况很像，看看我的帖子
https://www.chiphell.com/thread-2650598-1-1.html

我跟你有一点情况是一样的，都是x550t2，我是华为的sp331

ShermanLi

兄弟，你从任务管理器看看网络检测，传输文件的时候是不是锯齿状，会掉到0再弹到300

131CC6A

从windows上传一个大小30G的电影 传输波动很剧烈

131CC6A

ShermanLi 发表于 2024-11-12 14:01
兄弟，你从任务管理器看看网络检测，传输文件的时候是不是锯齿状，会掉到0再弹到300 ...

是啊 您目前解决了吗

yan1990_y

4块盘做RAID5，这个速度好像差不多？

ShermanLi

131CC6A 发表于 2024-11-12 14:06
是啊 您目前解决了吗

没解决，我跟你不太一样，我会掉到0KB，然后我http下载是基本达标的

131CC6A

yan1990_y 发表于 2024-11-12 14:09
4块盘做RAID5，这个速度好像差不多？

是啊 但我用了两根1T的NVME做的raid1 设置为读写缓存的 我现在怀疑文件根本没往缓存里面写

ShermanLi

ShermanLi 发表于 2024-11-12 14:10
没解决，我跟你不太一样，我会掉到0KB，然后我http下载是基本达标的

我觉得你这个可能是硬盘瓶颈，因为速度后面也稳定了，你要不试试把两个ssd读写缓的做成存储池，再来测试后面的环境有没有问题，排查一下

kingpino

希捷企业5盘10Traid5，机械盘也就700上下，你得测nas的nvme到电脑nvme磁盘的读写，机械盘还是存在瓶颈。巨型帧确实得开，我的这边不开也上不到1G，网卡省电设置啥的关闭。
我这turenae+X550T2传输电脑TN4010B（电口）加不加交换机不影响传输速度，一开始直连，后来买了个2口万兆交换机

yan1990_y

131CC6A 发表于 2024-11-12 14:12
是啊 但我用了两根1T的NVME做的raid1 设置为读写缓存的 我现在怀疑文件根本没往缓存里面写 ...

群晖有一个选项叫 跳过持续读写，你可以关了试试，强制走缓存。不然就直接落硬盘

131CC6A

yan1990_y 发表于 2024-11-12 14:52
群晖有一个选项叫 跳过持续读写，你可以关了试试，强制走缓存。不然就直接落硬盘 ...

破案了... 我仔细查看了一下群晖的文档 发现跳过连续I/O这个功能已经在DSM7系统后彻底删除了 目前群晖的SSD缓存只支持加速随机I/O 读写单个大文件是不加速的..... 没太搞明白群晖的想法

yan1990_y

131CC6A 发表于 2024-11-12 15:13
破案了... 我仔细查看了一下群晖的文档 发现跳过连续I/O这个功能已经在DSM7系统后彻底删除了 目前群晖的S ...

所以我只做了读缓存，写缓存没意义感觉

ShermanLi

131CC6A 发表于 2024-11-12 15:13
破案了... 我仔细查看了一下群晖的文档 发现跳过连续I/O这个功能已经在DSM7系统后彻底删除了 目前群晖的S ...

自己的硬件落后无法满足日益发展的功能需求，就从软件上做减法曲线救国，7.2.2移除视频解码功能这一点，是不是有异曲同工

我就不多骂了，黑群白嫖党，默默用就行了

Nolan1864

yan1990_y 发表于 2024-11-12 15:19
所以我只做了读缓存，写缓存没意义感觉

缓存需要二次命中才能加速，如果nas只有自己在用，短时间内没有重复访问的文件，是不是读缓存就没意义了？

unraid可以添加写缓存，然后闲时用mover移到hdd，不清楚群辉什么机制，听说群辉尤其是黑群晖开写缓存容易炸盘？

Marbury

6盘RAID5 以后 X550 持续写入是300-900  文件越大 持续时间越长 速度越快
这个时候 SSD 缓存 完全没意义了   然后 大多数 NAS里的 M.2 都是PCIE 3.0 X1 X2 X4都很少  跑4.0的几乎没有 除非是 12代U的NAS 而且 SSD 做缓存 寿命很短  3片512 组RAID5 做缓存  2年不到 就消耗了 60%

tyy474

所以威联通那边我直接选了zfs的hero系统，固态全都拿来当储存池，再也不用想什么时候用到读写缓存的问题

yan1990_y

Nolan1864 发表于 2024-11-13 01:33
缓存需要二次命中才能加速，如果nas只有自己在用，短时间内没有重复访问的文件，是不是读缓存就没意义了 ...

写缓存的确已经写挂2块固态了。读么，可能打开网页快一点…

jiaoxiake

机械盘瓶颈,除非换固态,在保证数据安全的情况下可以说是无解

mosigan

131CC6A 发表于 2024-11-12 15:13
破案了... 我仔细查看了一下群晖的文档 发现跳过连续I/O这个功能已经在DSM7系统后彻底删除了 目前群晖的S ...

正常啊，你所有的读写都进入固态缓存的话你觉得固态能用多久？半年？

131CC6A

mosigan 发表于 2024-11-14 17:44
正常啊，你所有的读写都进入固态缓存的话你觉得固态能用多久？半年？

我用不用和群晖阉不阉割这个功能是两码事，他至少要给我一个选择

brucelee1126

满盘状态差不多，如果raid5没满，那很拉跨

mosigan

131CC6A 发表于 2024-11-14 20:28
我用不用和群晖阉不阉割这个功能是两码事，他至少要给我一个选择

几乎所有的的固态缓存方案都是小io进固态，大io直接进硬盘阵列，群晖估计是怕用户不会设置，开得太狠后面缓存故障丢了数据要扯皮所以不开这个设置选项