AMD跑大模型终于Yes!MI300X对比NVIDIA H100/200毫不逊色

科技号9月5日消息,据媒体报道,AI算力领域,NVIDIA长期占据主导地位,但AMD的最新GPU产品MI300X在性能上终于展现出了与NVIDIA H100/200相媲美的实力。

根据The Information发布的评测报告,AMD的Instinct MI300X GPU在AI推理基准测试中的表现与NVIDIA的H100 GPU相当,显示出AMD在高性能AI计算领域的进步。

这份评测报告由MLCommons提供数据,在测试中,AMD的MI300X GPU以及NVIDIA的H100和H200 GPU均得到了评估。

结果显示,在AI推理任务中,MI300X GPU的性能与H100 GPU不相上下,加上对GPU成本及系统总成本的估计,说MI300X GPU能媲美H100和H200 GPU也不为过。

值得注意的是,这些测试仅使用了来自Meta的Llama 2 70B,尽管测试存在局限性,但这一结果仍然表明,AMD的MI300X GPU在处理大型AI模型方面具有强大的潜力。

业内人士也对AMD在AI领域的发展前景持乐观态度,Transformer作者及Cohere公司创始人之一艾丹·戈麦斯表示,他相信AMD和Tranium等平台将很快进入主流市场。

AMD跑大模型终于Yes!MI300X对比NVIDIA H100/200毫不逊色

文章来自互联网,不代表电脑知识网立场。发布者:tombkeeper,转载请注明出处:https://www.pcxun.com/n/174987.html

(0)
上一篇 2024-09-05 11:00
下一篇 2024-09-05 11:50

相关推荐