找回密码
 加入我们
搜索
      
查看: 1779|回复: 4

[显卡] A并不是不能替代N,KT已支持ROCm一周了

[复制链接]
发表于 2025-3-22 11:54 | 显示全部楼层 |阅读模式
截屏2025-03-22 09.50.23.png
发表于 2025-3-22 12:17 | 显示全部楼层
只要装机量足够大,自然会有各方帮着优化适配,不过这个要慢慢来,一点点渗透
 楼主| 发表于 2025-3-22 12:20 | 显示全部楼层
期待9070/9070XT, 64GB*4 RAM, 9950x跑满血R1/V3 unsloth 2.51 bits动态量化的性能。要是有10 tokens/s以上,人均本地满血不远了。
发表于 2025-3-22 12:26 来自手机 | 显示全部楼层
0.2.3post1和2,都存在降智情况,同一个模型和其他框架下跑出来的结果相差巨大。以前版本不这样的,不知道啥情况。
发表于 2025-3-22 17:37 | 显示全部楼层
N卡的护城河真深啊
您需要登录后才可以回帖 登录 | 加入我们

本版积分规则

Archiver|手机版|小黑屋|Chiphell ( 沪ICP备12027953号-5 )沪公网备310112100042806 上海市互联网违法与不良信息举报中心

GMT+8, 2025-4-20 16:56 , Processed in 0.009582 second(s), 6 queries , Gzip On, Redis On.

Powered by Discuz! X3.5 Licensed

© 2007-2024 Chiphell.com All rights reserved.

快速回复 返回顶部 返回列表