今年一月份,AMD在CES展會上揭開了一款名為 MI300X 的巨型數據中心芯片的面紗,作為即將來臨的新品的預告。如今,該芯片已經正式亮相,這也意味著我們終于可以看到 AMD 為其巨無霸級數據中心/AI加速器GPU提供的首次基準測試數據。果不其然,AMD 宣稱,無論你從哪個指標去比較,MI300X 都可以擊敗英偉達的旗艦產品 H100 GPU。AMD 此前在 AI 領域并未有太大動作,現在 AI 巨頭之戰正式打響。
本周,AMD 在其 "推動 AI" 活動上發布了 MI300X GPU,并正式向英偉達的 H100 發起挑戰。AMD 宣稱,它的 MI300X GPU 在諸多方面優于英偉達的 GPU,堪稱全球最快的AI加速器。例如,一份幻燈片顯示,與H100相比,MI300X提供了2.4倍的內存容量,1.6倍的內存帶寬,以及在FP8和FP16計算操作中分別提供了1.3倍的TFLOPS。在實際應用中,這也意味著 MI300X 在特定任務中的速度會比 H100 快1.6倍。
AMD 首席執行官 Lisa Su 舉例說,在運行Bloom "吞吐量"(使用1760億參數)的服務器平臺中,8塊MI300X芯片比HGX服務器中的8塊H100快60%,在"延遲提升"上,使用70億參數的Llama 2測試中也提高了40%。在單芯片對比中,AMD聲稱MI300X在FlashAttention-2和Llama 2等特定應用中依然有高達20%的速度優勢。Su還表示,在直接的LLM培訓中,8塊MI300X GPU與HGX服務器中的H100持平,但是在推理性能上領先。
除了MI300X,AMD還宣布了其下一代軟件套件,以與英偉達的CUDA平臺競爭。該套件被命名為ROCm 6,并已更新以支持最新的大規模語言模型和AI應用。更新后的套件提供了許多性能提升的改進,將提升AI相關任務的性能,但我們還需要等待基準測試結果,看看它在實際應用中的表現如何。
如今,AMD已正式步入高性能計算(HPC)領域,并攜正規的數據中心GPU,觀察其與英偉達主導地位的角逐將會相當有趣。這場戰斗類似于游戲GPU領域中的角逐,英偉達已占據了絕大多數市場份額,AMD 正為爭奪剩余的市場而戰。然而,MI300X對英偉達的H100構成了有力的競爭,甚至微軟的首席技術官最近都表示,他認為AMD最終在這個市場上將非常有競爭力。然而,AMD真正面臨的挑戰是克服英偉達憑借CUDA在軟件上的主導地位,這的確是一項艱巨的任務。
-
amd
+關注
關注
25文章
5468瀏覽量
134168 -
AI
+關注
關注
87文章
30896瀏覽量
269110 -
英偉達
+關注
關注
22文章
3776瀏覽量
91111 -
H100
+關注
關注
0文章
31瀏覽量
289
發布評論請先 登錄
相關推薦
評論