华人大神出手 A卡“炼丹”能力追上来了:RTX 4090八成性能

商务办公
究其根底,A卡在AI炼丹能力上的提升,尤其是RX 7900 XTX这样的游戏卡能有质变,还是AMD最近在ROCm软件生态上的改进,以前后者对游戏卡及Win平台的支持很差,4月份开始不仅支持Windows系统,也加入了对RX 7900及工作站显卡的支持。

除了玩游戏,NVIDIA的显卡还在AI加速上遥遥领先,不仅科技巨头都在抢A100/H100等显卡,GeForce游戏卡也是普通人搞AI炼丹的选择,AMD显卡在这方面落后不少。

好消息是AMD现在也能追上来了,深度学习领域的华人大神、OctoML CTO陈天奇带领团队在AMD显卡上做出了大模型推理的方案,这意味着业界又有NVIDI之外的选择,不用为N卡抢破头、加价而困扰了。

根据他的优化算法,在Llama2的7B和13B大模型中,用RX 7900 XTX显卡也能跑出让人满意的性能,性能已经达到了RTX 4090显卡82%或者RTX 3090 Ti显卡的94%水平。

华人大神出手 AMD显卡AI“炼丹”能力追上来了:RTX 4090八成性能华人大神出手 AMD显卡AI“炼丹”能力追上来了:RTX 4090八成性能

不仅是性能追上来了,AMD显卡的性价比也要高得多,RX 7900 XTX跟其他两款显卡都是24GB显存,但只要999美元,RTX 4090、RTX 3090 Ti分别是1599、1999元,价格高出60-100%。

当然,RX 7900 XTX现在的价格早就松动了,实际售价比999美元便宜不少,而N卡价格一直坚挺。

华人大神出手 AMD显卡AI“炼丹”能力追上来了:RTX 4090八成性能华人大神出手 AMD显卡AI“炼丹”能力追上来了:RTX 4090八成性能

究其根底,A卡在AI炼丹能力上的提升,尤其是RX 7900 XTX这样的游戏卡能有质变,还是AMD最近在ROCm软件生态上的改进,以前后者对游戏卡及Win平台的支持很差,4月份开始不仅支持Windows系统,也加入了对RX 7900及工作站显卡的支持。

同时AMD还发布了ROCm HIP SDK,允许开发者将针对CUDA平台开发的代码轻松迁移到AMD平台,这有是陈天奇等大神可以在AMD显卡上推动AI能力提升的基础。

责任编辑:武晓燕 来源: 快科技
相关推荐

2019-02-11 15:15:09

微软Windows 7Windows 10

2023-02-13 11:38:38

GPU笔记本性能

2012-04-16 16:02:05

Windows Pho跨平台

2012-05-22 16:42:34

游戏应用

2011-10-10 10:38:07

OracleSun服务器

2011-05-24 09:33:57

iOSiPadiPhone

2021-11-12 16:20:17

勒索软件攻击数据泄露

2023-06-20 07:19:49

RTX 4090HWBOT显卡

2023-04-14 07:18:24

RTX 4090Boost频率

2021-06-11 10:48:53

金融APP数据泄露漏洞

2015-09-01 10:00:33

Java开发者

2009-08-03 16:41:48

2009-12-08 09:34:29

宽带线路速率

2009-11-16 15:24:09

2023-09-27 06:20:47

AMDRTX 4090英伟达

2021-10-28 10:07:40

bot攻击网络机器人攻击网络攻击

2009-06-04 09:54:30

职场IT培训就业

2023-03-02 11:42:48

CPU芯片

2012-02-17 10:01:12

微软Windows Pho分成

2014-12-11 19:51:29

选择
点赞
收藏

51CTO技术栈公众号