(资料图片仅供参考)
快科技8月13日消息,除了玩游戏,NVIDIA的显卡还在AI加速上遥遥领先,不仅科技巨头都在抢A100/H100等显卡,GeForce游戏卡也是普通人搞AI炼丹的选择,AMD显卡在这方面落后不少。
好消息是AMD现在也能追上来了,深度学习领域的华人大神、OctoML CTO陈天奇带领团队在AMD显卡上做出了大模型推理的方案,这意味着业界又有NVIDI之外的选择,不用为N卡抢破头、加价而困扰了。
根据他的优化算法,在Llama2的7B和13B大模型中,用RX 7900 XTX显卡也能跑出让人满意的性能,性能已经达到了RTX 4090显卡82%或者RTX 3090 Ti显卡的94%水平。
不仅是性能追上来了,AMD显卡的性价比也要高得多,RX 7900 XTX跟其他两款显卡都是24GB显存,但只要999美元,RTX 4090、RTX 3090 Ti分别是1599、1999元,价格高出60-100%。
当然,RX 7900 XTX现在的价格早就松动了,实际售价比999美元便宜不少,而N卡价格一直坚挺。
究其根底,A卡在AI炼丹能力上的提升,尤其是RX 7900 XTX这样的游戏卡能有质变,还是AMD最近在ROCm软件生态上的改进,以前后者对游戏卡及Win平台的支持很差,4月份开始不仅支持Windows系统,也加入了对RX 7900及工作站显卡的支持。
同时AMD还发布了ROCm HIP SDK,允许开发者将针对CUDA平台开发的代码轻松迁移到AMD平台,这有是陈天奇等大神可以在AMD显卡上推动AI能力提升的基础。
【本文结束】如需转载请务必注明出处:快科技
责任编辑:宪瑞
下一篇:最后一页
X 关闭
-
快科技
2023-08-14
华人大神出手 AMD显卡AI“炼丹”能力追上来了:RTX 4090八成性能
-
北京日报
2023-08-14
北京互联网法院发布首份人格权侵害禁令
-
互联网
2023-08-14
音频无输出设备 音频输出设备没有了怎么办
-
互联网
2023-08-14
生日看女生性格:14号女生性格分析
-
哔哩哔哩
2023-08-13
3分钟内完成一个个性化的鲜花小程序
-
财联社
2023-08-13
云南楚雄州双柏县附近发生4.2级左右地震
-
光明网
2023-08-13
西安泥石流致21人遇难6人失联
-
互联网
2023-08-13
麻辣土豆片的做法
-
CCTV时讯
2023-08-13
夏威夷毛伊岛大火已致93人死亡,成为美百年来致死人数最多大火
-
互联网
2023-08-13
在移动中查看法拉利的新款SUV