電子發燒友網報道(文/周凱揚)作為在TOP500、GREEN500(單機柜)和HPL-AI三榜排名第一的超算系統,Frontier被列為第一完全不是浪得虛名。作為首個公開突破E級的超算,Frontier的通用算力已經達到了1.1 exaflops,能效比為52.23 gigaflops/watt,AI算力更是達到了可怕的6.88 exaflops。但就是這樣一臺冠絕群雄的超算,也在部署上遇到了供應問題。
實現Frontier強大性能靠的并非只是單個強勁的硬件,還有龐大的系統規模。整個Frontier超算系統用到了74個慧與科技的Cray EX全液冷超算機柜和9408塊AMD EYPC Trento CPU,Trento 是AMD Milan CPU的優化版,同樣是64核128線程的處理器,但在時鐘速度和能效上有所加強。至于為何沒用上引入3D垂直緩存技術的Milanx-X芯片,那是因為這塊處理器今年3月份才正式出貨,如果拿它來打造Frontier的話,這搶發首臺E級超算的機會很可能就失之交臂了。
Frontier主體部分的布局 / 美國橡樹嶺國家實驗室
除了CPU以外,Frontier還集成了37632塊AMD MI250X GPU,37632塊慧與的Cassini NIC,9.2PB的內存(4.6 PB HBM2e+4.6PB DDR4),32PB節點本地存儲和716PB的中心存儲。整個系統共由9408個節點組成,每臺機柜包含128個節點,重量接近400公斤,龐大的系統也將功耗推至恐怖的29MW。除了MW級的液冷引擎外,Frontier還在外部部署了EVAPCO的冷卻塔,確保Frontier能夠保證峰值性能。
供應鏈噩夢
Frontier的部署計劃正式始于2018年,為了給Frontier騰出空間,原本屬于Titan超算的數據中心被拆除,改建為Frontier的數據中心,泰坦也于2019年正式退役。同年,慧與的Cray系統成功拿下了美國能源部的訂單,成了Frontier的基礎構成部分。
但事實上,原本Frontier應該在2021年就部署完畢的,然而由于供應鏈上各個方面的影響,直到2021年秋季,才只完成了系統的交付,直到今年五月才完成最終的安裝、優化和一次成功的E級HPL測試。當然了,Frontier最后能夠爭下首發E級超算,還是因為英特爾的7nm工藝也就是如今的Intel 4遇到了問題,被反復推遲,這樣才讓原本打算首發E級的Aurora超算,錯失了這個殊榮。
但對于Frontier超級計算機這種大型集成系統來說,全球供應鏈各個環節上的問題基本也都撞上了。首先遇上問題的就是Frontier的兩大直接供應商,慧與和AMD。2020年末,Frontier的零部件短缺到了最嚴重的地步。整個Frontier系統要用到685個不同料號的零部件,其中167個因為缺貨問題而受到影響,總數達到了200萬個。
慧與表示,當它們開始下單用于機柜和Slingshot互聯系統的部件時,不少供應商都將訂單的交期加上了6個月甚至是一年,這時連離打造好第一個機柜都還缺12種零部件。AMD就更加不用說了,2020年到2021年是全球GPU缺貨最嚴重的一段時間,雖然大部分都認為受影響的只有被挖礦潮波及的消費級GPU,但對于AMD來說,他們在GPU加速卡零部件上的供應也遇到了問題,就拿MI250這張卡來說,且不說GPU芯片的產能供應是否充足,當時打造這一張GPU加速卡就有15種零部件需要補全。
波及的不只是CPU和GPU
要知道這些短缺問題影響的不只是CPU和GPU芯片,還有不少零部件當時都處于全球缺貨最糟糕的狀態,比如穩壓器、晶振和功率模塊。為了確保能在2021年交付,慧與不得不每周甚至每天打給次級供應商,詢問交期的問題。慧與和AMD還組了個15人的小團隊,他們唯一的工作就是尋找哪有Frontier所需的零部件,或是可以替代的部件,比如去和經銷商協調,詢問分銷商的庫存,或是找其他同樣由于芯片短缺而無法出貨的公司,詢問他們是否愿意出手現在已有的零部件。
正是因為在這樣的努力下,Frontier終于在去年7月將缺失的167種零部件減少至了1種,而這依然缺失的一種,就是用于打造慧與Slingshot 11互聯交換機刀片的晶振,它們已有的晶振只能滿足63臺機柜的需求,還差8000多個晶振才能完成剩下11臺機柜的交付。而這時候恰好又是東南亞地區疫情肆虐,愛普生等廠商的晶振工廠停工的時期,而這類智能NIC又需要超低噪聲的高性能晶振。接著他們又花了3周時間才找齊這些晶振,這才在10月完成了最后一個機柜的交付。
凌晨滿功耗運轉的Frontier / 美國橡樹嶺國家實驗室
但即便完成了交付,相關的工作并沒有結束,超算并不像大家平日里動手組裝的電腦一樣,一旦安裝完畢就能跑出應有的性能。恰恰相反,超算系統所有部件到位后,還要經歷密集的測試、優化和維護工作,于是Frontier的研究人員白天就在更新軟件優化系統,晚上就讓Frontier跑HPL之類的性能測試,最終趕在TOP500 6月榜單結束測試結果收集前,提交了一次成功的E級跑分。
結語
其實完成這么緊湊的部署安排對Frontier并不容易,固然慧與和AMD有應對供應鏈管理方面的經驗,但與此同時,和Frontier幾乎同樣配置只是規模不同的歐洲超算LUMI也面臨著缺貨的困境,所以這兩家公司幾乎是承擔著雙線交付任務。但好在去年下半年供應開始緩解之后,兩臺超算的任務也都最終完成了。
此外,這兩年經歷的供應鏈噩夢想必也影響到了其他的超算部署,就拿國內的兩臺E級超算來說,目前都只是單機柜的測試系統的消息時有傳出,并沒有正式公開完整系統的性能參數,或多或少也是被供應問題拖慢了進度,否則這個風頭不可能不出來搶的。畢竟在硬件迭代如此迅速的背景下,像天河二號過去那樣連續穩坐榜首數年的情況已經很難復現了,但首個E級超算的稱號可是無論多少年后都搶不走的。
狂堆硬件的Frontier
實現Frontier強大性能靠的并非只是單個強勁的硬件,還有龐大的系統規模。整個Frontier超算系統用到了74個慧與科技的Cray EX全液冷超算機柜和9408塊AMD EYPC Trento CPU,Trento 是AMD Milan CPU的優化版,同樣是64核128線程的處理器,但在時鐘速度和能效上有所加強。至于為何沒用上引入3D垂直緩存技術的Milanx-X芯片,那是因為這塊處理器今年3月份才正式出貨,如果拿它來打造Frontier的話,這搶發首臺E級超算的機會很可能就失之交臂了。
Frontier主體部分的布局 / 美國橡樹嶺國家實驗室
除了CPU以外,Frontier還集成了37632塊AMD MI250X GPU,37632塊慧與的Cassini NIC,9.2PB的內存(4.6 PB HBM2e+4.6PB DDR4),32PB節點本地存儲和716PB的中心存儲。整個系統共由9408個節點組成,每臺機柜包含128個節點,重量接近400公斤,龐大的系統也將功耗推至恐怖的29MW。除了MW級的液冷引擎外,Frontier還在外部部署了EVAPCO的冷卻塔,確保Frontier能夠保證峰值性能。
供應鏈噩夢
Frontier的部署計劃正式始于2018年,為了給Frontier騰出空間,原本屬于Titan超算的數據中心被拆除,改建為Frontier的數據中心,泰坦也于2019年正式退役。同年,慧與的Cray系統成功拿下了美國能源部的訂單,成了Frontier的基礎構成部分。
但事實上,原本Frontier應該在2021年就部署完畢的,然而由于供應鏈上各個方面的影響,直到2021年秋季,才只完成了系統的交付,直到今年五月才完成最終的安裝、優化和一次成功的E級HPL測試。當然了,Frontier最后能夠爭下首發E級超算,還是因為英特爾的7nm工藝也就是如今的Intel 4遇到了問題,被反復推遲,這樣才讓原本打算首發E級的Aurora超算,錯失了這個殊榮。
但對于Frontier超級計算機這種大型集成系統來說,全球供應鏈各個環節上的問題基本也都撞上了。首先遇上問題的就是Frontier的兩大直接供應商,慧與和AMD。2020年末,Frontier的零部件短缺到了最嚴重的地步。整個Frontier系統要用到685個不同料號的零部件,其中167個因為缺貨問題而受到影響,總數達到了200萬個。
慧與表示,當它們開始下單用于機柜和Slingshot互聯系統的部件時,不少供應商都將訂單的交期加上了6個月甚至是一年,這時連離打造好第一個機柜都還缺12種零部件。AMD就更加不用說了,2020年到2021年是全球GPU缺貨最嚴重的一段時間,雖然大部分都認為受影響的只有被挖礦潮波及的消費級GPU,但對于AMD來說,他們在GPU加速卡零部件上的供應也遇到了問題,就拿MI250這張卡來說,且不說GPU芯片的產能供應是否充足,當時打造這一張GPU加速卡就有15種零部件需要補全。
波及的不只是CPU和GPU
要知道這些短缺問題影響的不只是CPU和GPU芯片,還有不少零部件當時都處于全球缺貨最糟糕的狀態,比如穩壓器、晶振和功率模塊。為了確保能在2021年交付,慧與不得不每周甚至每天打給次級供應商,詢問交期的問題。慧與和AMD還組了個15人的小團隊,他們唯一的工作就是尋找哪有Frontier所需的零部件,或是可以替代的部件,比如去和經銷商協調,詢問分銷商的庫存,或是找其他同樣由于芯片短缺而無法出貨的公司,詢問他們是否愿意出手現在已有的零部件。
正是因為在這樣的努力下,Frontier終于在去年7月將缺失的167種零部件減少至了1種,而這依然缺失的一種,就是用于打造慧與Slingshot 11互聯交換機刀片的晶振,它們已有的晶振只能滿足63臺機柜的需求,還差8000多個晶振才能完成剩下11臺機柜的交付。而這時候恰好又是東南亞地區疫情肆虐,愛普生等廠商的晶振工廠停工的時期,而這類智能NIC又需要超低噪聲的高性能晶振。接著他們又花了3周時間才找齊這些晶振,這才在10月完成了最后一個機柜的交付。
凌晨滿功耗運轉的Frontier / 美國橡樹嶺國家實驗室
但即便完成了交付,相關的工作并沒有結束,超算并不像大家平日里動手組裝的電腦一樣,一旦安裝完畢就能跑出應有的性能。恰恰相反,超算系統所有部件到位后,還要經歷密集的測試、優化和維護工作,于是Frontier的研究人員白天就在更新軟件優化系統,晚上就讓Frontier跑HPL之類的性能測試,最終趕在TOP500 6月榜單結束測試結果收集前,提交了一次成功的E級跑分。
結語
其實完成這么緊湊的部署安排對Frontier并不容易,固然慧與和AMD有應對供應鏈管理方面的經驗,但與此同時,和Frontier幾乎同樣配置只是規模不同的歐洲超算LUMI也面臨著缺貨的困境,所以這兩家公司幾乎是承擔著雙線交付任務。但好在去年下半年供應開始緩解之后,兩臺超算的任務也都最終完成了。
此外,這兩年經歷的供應鏈噩夢想必也影響到了其他的超算部署,就拿國內的兩臺E級超算來說,目前都只是單機柜的測試系統的消息時有傳出,并沒有正式公開完整系統的性能參數,或多或少也是被供應問題拖慢了進度,否則這個風頭不可能不出來搶的。畢竟在硬件迭代如此迅速的背景下,像天河二號過去那樣連續穩坐榜首數年的情況已經很難復現了,但首個E級超算的稱號可是無論多少年后都搶不走的。
聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。
舉報投訴
-
供應鏈
+關注
關注
3文章
1683瀏覽量
38999 -
超算
+關注
關注
1文章
115瀏覽量
9118
發布評論請先 登錄
相關推薦
天合光能入選國家級數字化供應鏈案例
近日,工業和信息化部公示“2024年實數融合典型案例名單”,天合光能以“基于產銷協同一體化的供應鏈精細數字化管控”成功入選國家級數字化供應鏈案例,這是繼國家綠色供應鏈、全國供應鏈創新與
同星智能即將亮相第六屆汽車新供應鏈大會
同星一周展會TOSUN.EXHIBIT第六屆汽車新供應鏈大會第六屆汽車新供應鏈大會將于2025年1月14-15日在上海舉辦,本屆汽車新供應鏈大會以“共建生態,協同出海”為核心議題,既是對當前汽車整車
利用Minitab應對供應鏈中斷問題
供應鏈中斷是不可避免的,但積極的措施和數據驅動的戰略可以減輕其影響。Minitab全面的數據分析和問題解決工具使組織能夠分析、優化和調整其供應鏈,以應對不可預見的挑戰,確保面對中斷時的彈性和連續性。
保隆科技榮獲東風日產最佳供應鏈合作伙伴
近日,東風日產在廣州舉行2024年供應鏈合作伙伴大會,保隆科技張祖秋董事長應邀出席并在大會發言,保隆科技被授予“最佳供應鏈合作伙伴”,這是東風日產對保隆科技長期以來良好合作、提供優秀產品和優質服務的高度肯定。
智能制造裝備行業的供應鏈特點分析
智能制造裝備行業供應鏈涉及多個環節,包括原材料采購、生產制造、物流配送和售后服務等,其特點包括復雜性與多樣性、全球化與分散性、技術密集型和快速變化性。供應鏈面臨的挑戰包括數據孤島、信息不對稱、供應鏈中斷風險和成本控制難度大等。
數字孿生在供應鏈優化中的作用
在當今快速變化的商業環境中,供應鏈管理的復雜性和挑戰性日益增加。企業需要不斷創新和優化其供應鏈流程,以提高效率、降低成本并增強競爭力。數字孿生技術的出現為供應鏈管理提供了一種全新的視角和工具,它通過
壹沓科技完成B+輪融資,加速大供應鏈超自動化進程
近日,全球領先的數字員工機器人公司——壹沓科技宣布成功完成B+輪融資,此輪融資由鼎暉VGC(創新與成長基金)領投,新尚資本跟投,彰顯了資本市場對壹沓科技在大供應鏈領域超自動化解決方案的高度認可與信心。
供應鏈場景使用ClickHouse最佳實踐
關于ClickHouse的基礎概念這里就不做太多的贅述了,ClickHouse官網都有很詳細說明。結合供應鏈數字化團隊在使用ClickHouse時總結出的一些注意事項,尤其在命名方面要求研發嚴格遵守
供應鏈大屏設計實踐
概述 在物流系統相關的大屏中,供應鏈大屏復雜度較高,數據鏈路較長,穩定性要求較高,當前大屏已經經過2年時間的打磨,整體表現已經相對比較成熟穩定。 本文描述了物流供應鏈業務較復雜的業務場景下,結合了
韓國承諾為電動汽車電池供應鏈提供71億美元的援助計劃
韓國政府承諾為電動汽車電池供應鏈提供71億美元的援助計劃,旨在建立符合美國稅收減免規則的新供應鏈,減少對中國的依賴。
蘋果最新供應鏈名單:大陸新增8家,剔除4家!
產品材料、制造和組裝直接支出的98%。 在此次的2023財年蘋果供應鏈名單當中,中國大陸新進8家企業,有4家企業被剔除;中國臺灣供應商新進2家企業,同樣也有4家企業被剔除。 其中,新增
戴爾榮獲Gartner供應鏈的最高榮譽“年度供應鏈突破獎”
Gartner Power of the Profession供應鏈獎項由全球領先的研究顧問公司Gartner主辦,至今已舉辦了10個年頭。
掌控供應鏈,決勝市場:SCM供應鏈管理系統的戰略意義
SCM供應鏈管理系統是現代企業管理中的重要組成部分,它通過整合和優化供應鏈中的各個環節,實現企業資源的高效利用和協同運作。
評論