在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Vicor引領(lǐng)生成式人工智能供電技術(shù)的創(chuàng)新浪潮

Vicor ? 來源:Vicor ? 2024-06-11 16:03 ? 次閱讀

雖然人工智能有望帶來人類生產(chǎn)力的飛躍,但其運(yùn)行時能耗巨大,導(dǎo)致溫室氣體的排放也顯著增加。如今,Vicor 電源模塊與垂直供電架構(gòu)相結(jié)合,為 GenAI 提供了高效的供電方法,實現(xiàn)行業(yè)領(lǐng)先的電流密度。

訓(xùn)練生成式人工智能(GenAI)神經(jīng)網(wǎng)絡(luò)模型通常需要花費(fèi)數(shù)月的時間,數(shù)千個基于 GPU 并包含數(shù)十億個晶體管處理器、高帶寬 SDRAM 和每秒數(shù)太比特的光網(wǎng)絡(luò)交換機(jī)要同時連續(xù)運(yùn)行。雖然人工智能有望帶來人類生產(chǎn)力的飛躍,但其運(yùn)行時能耗巨大,所以導(dǎo)致溫室氣體的排放也顯著增加。

據(jù)《紐約時報》報道,到 2027 年,人工智能服務(wù)器每年的用電量將達(dá)到 85 至 134 太瓦時,大致相當(dāng)于阿根廷一年的用電量。

為了應(yīng)對日益加劇的能耗挑戰(zhàn),AI 處理器的供電網(wǎng)絡(luò)經(jīng)歷了多代的發(fā)展。這種全面的演進(jìn)發(fā)展涉及電路架構(gòu)、電源轉(zhuǎn)換拓?fù)洹⒉牧峡茖W(xué)、封裝和機(jī)械/熱工程方面的創(chuàng)新。

生成式人工智能訓(xùn)練處理器的供電方案

負(fù)載點(diǎn)模式和分比式模式的演變

從 2020 年到2022 年,熱設(shè)計功率(TDP)幾乎翻了一番,從 400W 增加到了 700W。TDP 指標(biāo)是指生成式人工智能訓(xùn)練應(yīng)用中 GPU 引擎的連續(xù)功耗。自 2022 年起,半導(dǎo)體行業(yè)的 TDP 水平不斷攀升,到了 2024 年 3 月,市場上甚至出現(xiàn)了一款 TDP 高達(dá) 1000W 的 GPU。

用于生成式人工智能訓(xùn)練的處理器復(fù)合體集成了一個 GPU 或ASIC 芯片,以及六到八個高帶寬存儲器(HBM)芯片。采用 4 納米 CMOS 工藝的 GPU 通常以 0.65V 的內(nèi)核 VDD 運(yùn)行,可能包含 1000 億或更多的晶體管。HBM 提供 144GB 的存儲容量,其工作電壓一般為 1.1V 或 1.2V。該處理器的一個關(guān)鍵供電特性與人工神經(jīng)網(wǎng)絡(luò)算法負(fù)載有關(guān)。對比處于空閑狀態(tài)的 GPU 和算法滿載狀態(tài)的 GPU,瞬態(tài)電流消耗(dI/dt)差別可能非常大,可能達(dá)到每微秒 2000 安培或更多。此外,該處理器不能容忍較大的電源電壓下沖或過沖幅值;這些負(fù)載階躍瞬變必須限制在標(biāo)稱 VDD 的 10% 以內(nèi)。設(shè)計用于生成式人工智能訓(xùn)練處理器的供電解決方案時,由于這些動態(tài)操作條件的原因,峰值電流輸送能力通常設(shè)計為連續(xù)電流輸送能力的兩倍,峰值事件通常持續(xù)數(shù)十毫秒(圖 1)。

0f8b67e0-27a5-11ef-91d2-92fbcf53809c.png

圖 1:基于 GPU 的生成式人工智能訓(xùn)練處理器芯片復(fù)合體,加速器模塊(AM)上安裝有高帶寬存儲器(HBM)。

對于 CPUFPGA、網(wǎng)絡(luò)交換機(jī)處理器以及現(xiàn)在的 AI 訓(xùn)練和推理芯片發(fā)展最重要的供電架構(gòu)是負(fù)載點(diǎn)(PoL)方法。相較于傳統(tǒng)的多相并聯(lián)電源架構(gòu),分比式 PoL 電源架構(gòu)實現(xiàn)了更高的功率和電流密度。這種電源架構(gòu)借鑒了理想變壓器的“匝數(shù)比”概念,通過分壓實現(xiàn)電流倍增。電流倍增的可擴(kuò)展性使我們能夠根據(jù)不同的輸出電壓和電流需求,開發(fā)一系列全面的 PoL 轉(zhuǎn)換器。這對客戶來說至關(guān)重要,因為高級 AI 訓(xùn)練處理器的需求正快速變化。

分比式電源架構(gòu)(FPA)

分解為穩(wěn)壓和變壓兩部分功能

生成式人工智能電源系統(tǒng)設(shè)計面臨的主要挑戰(zhàn)包括:

很高的電流輸送能力,范圍從 500 安培到 2000 安培

負(fù)載需要出色的動態(tài)性能

PDN 的損耗和阻抗較大

48V 母線基礎(chǔ)架構(gòu)的標(biāo)準(zhǔn)化使用,需要從 48V 轉(zhuǎn)換到 1V 以下的能力

要解決這種大電流和高密度負(fù)載點(diǎn)(PoL)問題,需要采用不同的方法。先進(jìn)的分比式電源架構(gòu)將穩(wěn)壓和變壓/電流倍增功能進(jìn)行了分解,可將這些供電級放置在最佳位置,從而達(dá)到最高的效率和功率/電流密度。

當(dāng)輸入電壓(VIN)等于輸出電壓(VOUT)時,穩(wěn)壓器的效率最高,隨著輸入輸出比的增加,效率逐漸降低。在 36 至 60V 的典型輸入電壓范圍內(nèi),最佳輸出母線電壓將是 48V,而不是中間母線架構(gòu)(IBA)中常見的傳統(tǒng) 12V 母線電壓。48V 輸出母線所需的電流是 12V 線的四分之一(P=VI),而 PDN 的損耗是電流的平方(P=I2R),這意味著損耗降低至原來的 1/16。因此,先安裝穩(wěn)壓器并將其調(diào)節(jié)至 48V 輸出,可以實現(xiàn)最高的效率。穩(wěn)壓器還必須接受有時低于 48V 的輸入電壓,這就需要一個降壓-升壓的功能來滿足這一設(shè)計需求。一旦輸入電壓得到了穩(wěn)壓,下一步便是將 48V 轉(zhuǎn)換為 1V。

在需要為 1V 負(fù)載供電的情況下,最佳變壓比為 48:1。在這種情況下,穩(wěn)壓器將輸入電壓降壓或升壓到 48V 輸出,再由變壓器將電壓從 48 降至 1V。降壓變壓器以相同的比率加大電流,因此變壓器組件也可以稱為電流倍增器。在這種情況下,1 安培的輸入電流將倍增至 48 安培的輸出電流。為了最大限度地減少大電流輸出的 PDN 損耗,電流倍增器必須小巧,以便盡可能靠近負(fù)載放置。

PRMTM 穩(wěn)壓器和 VTMTM/MCMTM 模塊化電流倍增器結(jié)合在一起,構(gòu)成 Vicor 分比式電源架構(gòu)。這兩個器件相互合作,各司其職,實現(xiàn)完整的 DC-DC 轉(zhuǎn)換功能。

PRM 通過調(diào)制未穩(wěn)壓的輸入電源提供穩(wěn)壓輸出電壓,即“分比式母線電壓”。該母線供電給 VTM,由 VTM 將分比式母線電壓轉(zhuǎn)換為負(fù)載所需的電平。

與 IBA 不同,F(xiàn)PA 不通過串聯(lián)電感器從中間母線電壓降壓至 PoL。FPA 不通過降低中間母線電壓來平均電壓,而是使用電流增益為 1:48 或更高的高壓穩(wěn)壓和電流倍增器模塊,以提供更高的效率、更小的尺寸、更快的響應(yīng)和 1000 安培及以上的可擴(kuò)展性(圖 2)。

0fc2c5f0-27a5-11ef-91d2-92fbcf53809c.png

圖 2:分比式電源架構(gòu)可以提供超過 1000 安培的大電流,并使供電網(wǎng)絡(luò)的電阻降低到 1/20。

垂直放置 PoL 轉(zhuǎn)換器減少功耗耗散

在前幾代大電流生成式人工智能處理器電源架構(gòu)中,PoL 轉(zhuǎn)換器被放在處理器復(fù)合體的橫向(旁邊)位置。由于銅的電阻率和 PCB 上的走線長度,橫向放置的 PoL 供電網(wǎng)絡(luò)(PDN)的集總阻抗相當(dāng)高,可能達(dá)到 200μΩ 或更高。隨著生成式人工智能訓(xùn)練處理器的連續(xù)電流需求增加到 1000 安培,這意味著 PCB 本身就會消耗掉 200 瓦的功率。考慮到在 AI 超級計算機(jī)中用于大型語言模型訓(xùn)練的加速器模塊(AM)多達(dá)數(shù)千個,而且?guī)缀鯊牟粩嚯姡ǔ掷m(xù)運(yùn)行 10 年或更長時間,這 200 瓦的功率損耗在整體上變得非常龐大。

認(rèn)識到這種能源浪費(fèi)后,AI 計算機(jī)設(shè)計師已經(jīng)開始評估采用垂直供電(VPD)結(jié)構(gòu),將 PoL 轉(zhuǎn)換器直接放置在處理器復(fù)合體的下方。在垂直供電網(wǎng)絡(luò)中,集總阻抗可能降至 10μΩ 或更低,這意味著在內(nèi)核電壓域 1000 安培的連續(xù)電流下,只會消耗 10 瓦的功率。也就是說,通過將 PoL 轉(zhuǎn)換器從橫向放置改為縱向放置,PCB 的功耗減少了 200–10=190 瓦(WPCB )(圖 3)。

0fed1b02-27a5-11ef-91d2-92fbcf53809c.png

圖 3:生成式人工智能加速模塊從橫向(頂部)供電改為縱向(背部)供電,可將 PDN 損耗降低至 1/20。

VPD 的另一個優(yōu)點(diǎn)是降低了 GPU 芯片表面電壓梯度,這也有助于節(jié)省電力。如前所述,典型的 4 納米 CMOS GPU 的標(biāo)稱工作電壓為 0.65VDD。使用橫向供電時,將電源提供給處理器復(fù)合體的四邊,由于集成電路的配電阻抗較高(通常使用電阻率高于銅的鋁導(dǎo)體),可能需要 0.70V 的電壓,才能確保 GPU 芯片中心的電壓達(dá)到標(biāo)稱值 0.65V。而采用縱向供電時,可以確保整個芯片表面的電壓為 0.65V。0.70–0.65=50mV,這個差值乘以 1000 安培,可額外節(jié)省 50 瓦(WVDD)的功率。在本例中,節(jié)省的總功率為 190WPCB + 50WVDD = 240 瓦(圖 4)。

0f5554b6-27a5-11ef-91d2-92fbcf53809c.png

圖 4:使用 VPD 時,處理器芯片的表面電壓均勻,有助于最大限度地提高計算性能,同時最小化功率損耗。

根據(jù)未來幾年公共領(lǐng)域?qū)铀倨髂K(AM)需求的預(yù)測(2024 年超過 250 萬件),以及對電力成本的合理估計(每兆瓦時 75 美元),每個 AM 節(jié)省 240W 電力,到 2026 年將在全球范圍內(nèi)實現(xiàn)太瓦時的電力節(jié)省,相當(dāng)于每年節(jié)約數(shù)十億美元的電力運(yùn)營成本,而且根據(jù)可再生能源的使用比例,每年還能永久性地減少數(shù)百萬噸的二氧化碳排放。

遏制失控的生成式人工智能功耗

Vicor 正引領(lǐng)生成式人工智能供電技術(shù)的創(chuàng)新浪潮。他們提供的分比式負(fù)載點(diǎn)轉(zhuǎn)換器解決方案有助于提升生成式人工智能處理器的功效,使生成式人工智能的功耗與社會層面的環(huán)境保護(hù)和節(jié)能目標(biāo)相一致。Vicor 持續(xù)推動電源架構(gòu)的創(chuàng)新,并開發(fā)先進(jìn)的新產(chǎn)品,致力于解決生成式人工智能模型訓(xùn)練帶來的功耗增加問題。通過采用先進(jìn)的分比式電流倍增器方法進(jìn)行負(fù)載點(diǎn) DC-DC 轉(zhuǎn)換,就可以充分發(fā)揮生成式人工智能優(yōu)勢,同時有效控制全球范圍內(nèi)的能源消耗。

審核編輯:彭菁

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 處理器
    +關(guān)注

    關(guān)注

    68

    文章

    19286

    瀏覽量

    229841
  • 供電技術(shù)
    +關(guān)注

    關(guān)注

    1

    文章

    25

    瀏覽量

    10759
  • 人工智能
    +關(guān)注

    關(guān)注

    1791

    文章

    47279

    瀏覽量

    238491
  • Vicor
    +關(guān)注

    關(guān)注

    4

    文章

    194

    瀏覽量

    58494

原文標(biāo)題:Vicor 電源模塊與垂直供電架構(gòu)相結(jié)合,為 GenAI 提供高效供電方法

文章出處:【微信號:Vicor,微信公眾號:Vicor】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    《AI for Science:人工智能驅(qū)動科學(xué)創(chuàng)新》第一章人工智能驅(qū)動的科學(xué)創(chuàng)新學(xué)習(xí)心得

    ,無疑為讀者鋪設(shè)了一條探索人工智能(AI)如何深刻影響并推動科學(xué)創(chuàng)新的道路。在閱讀這一章后,我深刻感受到了人工智能技術(shù)在科學(xué)領(lǐng)域的廣泛應(yīng)用潛力以及其帶來的革命性變化,以下是我個人的學(xué)習(xí)心得: 1.
    發(fā)表于 10-14 09:12

    人工智能是什么?

    和提出都可以歸結(jié)于人工智能技術(shù)的高速發(fā)展。 作為創(chuàng)新人工智能技術(shù)領(lǐng)域的典型代表——機(jī)器人,當(dāng)仁不讓的成為創(chuàng)新技術(shù)產(chǎn)業(yè)里的掌上明珠,也是信息時代轉(zhuǎn)向
    發(fā)表于 09-16 15:40

    智能家居,現(xiàn)代家庭生活的新浪潮

    `現(xiàn)代家庭越來越注重生活理念及生活品質(zhì),數(shù)字化、網(wǎng)絡(luò)化、智能化和交互的多媒體電子產(chǎn)品將逐漸成為家庭生活和娛樂的多媒體中心,成為現(xiàn)代家庭生活的新浪潮。LivingLab智能家居為你打造
    發(fā)表于 06-09 10:18

    非接觸工業(yè)雷達(dá)傳感器開啟應(yīng)用創(chuàng)新浪潮

    DSP均集成在一塊電路板上,這塊電路板可以直接用作生命體征監(jiān)測系統(tǒng)。當(dāng)人坐在這款產(chǎn)品前面,它會將極低功率的雷達(dá)信號傳送到他的身體,然后通過讀取信號從而可以獲得這個人的心率和呼吸速率信息。雷達(dá)應(yīng)用創(chuàng)新浪潮
    發(fā)表于 06-24 05:00

    DSP技術(shù)的三波創(chuàng)新浪潮

    作者:陳路迄今為止,DSP技術(shù)的發(fā)展或進(jìn)步已經(jīng)促成了二波創(chuàng)新浪潮。第一波創(chuàng)新浪潮是電信應(yīng)用,它使得原先像一塊大磚頭似的第一代模擬大哥大電話變成了可以塞進(jìn)褲袋的袖珍型手機(jī),它將連接PC和互聯(lián)網(wǎng)的DSL
    發(fā)表于 07-01 07:57

    Vicor研發(fā)創(chuàng)新電源模塊技術(shù)

    和48V到負(fù)載的最新功率模塊。此模塊是迄今為止為最具挑戰(zhàn)性的數(shù)據(jù)中心電源理解解決方案計劃。在數(shù)據(jù)時代,人工智能促進(jìn)了數(shù)據(jù)中心和大功率計費(fèi)的快速轉(zhuǎn)型,人工智能的快速發(fā)展促進(jìn)了XPU所需的電源完成相應(yīng)的增長
    發(fā)表于 11-29 09:02

    開放的生態(tài)加速人工智能時代的到來

    2017全球人工智能創(chuàng)新峰會Arm分論壇成功召開,Arm與多家生態(tài)系統(tǒng)合作伙伴亮相,共探人工智能創(chuàng)新浪潮中的機(jī)遇與挑戰(zhàn)。
    的頭像 發(fā)表于 09-21 13:58 ?4984次閱讀

    創(chuàng)新浪潮:物聯(lián)網(wǎng)和人工智能是邊緣設(shè)備數(shù)量迅速增加的推動力

    雖然前幾波創(chuàng)新浪潮專注于設(shè)備或設(shè)備格局,但最近的變化已影響到細(xì)分市場、公司和使用場景。網(wǎng)絡(luò)設(shè)備的激增顯著改變了我們的生活,整個行業(yè)正在努力地將其所產(chǎn)生的勢頭轉(zhuǎn)變成效率、決策和大量數(shù)據(jù)的盈利機(jī)會。
    的頭像 發(fā)表于 11-27 15:23 ?6138次閱讀

    中國高新技術(shù)論壇搶先看:新時代、新技術(shù)、新經(jīng)濟(jì)--“新基建”引領(lǐng)發(fā)展新浪潮

    11 月 11 日下午,第二十二屆高交會中國高新技術(shù)論壇 新時代、新技術(shù)、新經(jīng)濟(jì) 主題論壇將在深圳會展中心五樓簕杜鵑廳舉辦。該場論壇將會討論的議題主要包括 新基建 引領(lǐng)發(fā)展新浪潮
    的頭像 發(fā)表于 11-03 11:08 ?2703次閱讀

    壓觸反饋技術(shù)引領(lǐng)交互革命 開啟全屋智能新浪潮

    全屋智能新浪潮。01非一般振動反饋的智能中控屏華為發(fā)布會結(jié)束后,行內(nèi)最多出現(xiàn)的一句話是:智能家居正在從單品走向全屋智能。從發(fā)布會上可以了解到
    的頭像 發(fā)表于 03-19 10:05 ?589次閱讀
    壓觸反饋<b class='flag-5'>技術(shù)</b>:<b class='flag-5'>引領(lǐng)</b>交互革命 開啟全屋<b class='flag-5'>智能</b><b class='flag-5'>新浪潮</b>

    亞信電子與安勤科技攜手共創(chuàng)TSN技術(shù)新浪潮

    亞信電子與安勤科技攜手共創(chuàng)TSN技術(shù)新浪潮
    的頭像 發(fā)表于 07-31 22:49 ?588次閱讀
    亞信電子與安勤科技攜手共創(chuàng)TSN<b class='flag-5'>技術(shù)</b><b class='flag-5'>新浪潮</b>

    生成人工智能服務(wù)管理暫行辦法》正式施行,商湯「數(shù)字水印」護(hù)航生成AI可信和著作權(quán)保護(hù)

    生成AI技術(shù)(AIGC)掀起了內(nèi)容創(chuàng)作新浪潮,但大眾被誤導(dǎo)、作品被侵權(quán)的情況也接踵而至,行業(yè)對加強(qiáng)AI生成內(nèi)容監(jiān)管的呼聲愈發(fā)高漲。 “數(shù)字
    的頭像 發(fā)表于 08-25 13:00 ?1682次閱讀
    《<b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>人工智能</b>服務(wù)管理暫行辦法》正式施行,商湯「數(shù)字水印」護(hù)航<b class='flag-5'>生成</b><b class='flag-5'>式</b>AI可信和著作權(quán)保護(hù)

    中國移動董事長楊杰在MWC2024上探討AI創(chuàng)新浪潮

    楊杰對人工智能驅(qū)動的創(chuàng)新浪潮提出深刻洞見:抓住科技革命浪潮,尋找新的發(fā)展機(jī)會;堅持“5G+”發(fā)展戰(zhàn)略,完成新時代賦予的使命;邁進(jìn)“AI+”時代,共享創(chuàng)新成果的美好愿景。
    的頭像 發(fā)表于 02-27 09:56 ?877次閱讀

    Live20.8多功能數(shù)字調(diào)音臺引領(lǐng)新浪潮

    Live20.8多功能數(shù)字調(diào)音臺憑借其輕巧的體積、強(qiáng)大的功能和人性化的設(shè)計,這款獨(dú)具匠心的調(diào)音臺正引領(lǐng)著調(diào)音臺的革新浪潮
    的頭像 發(fā)表于 03-13 16:38 ?705次閱讀

    Vicor技術(shù)如何改進(jìn)生成人工智能供電

    生成人工智能(genAI)帶來的文化革命可能像互聯(lián)網(wǎng)普及一樣對人類產(chǎn)生深遠(yuǎn)影響。從您的角度來看,目前情況如何?
    的頭像 發(fā)表于 10-16 09:54 ?312次閱讀
    <b class='flag-5'>Vicor</b><b class='flag-5'>技術(shù)</b>如何改進(jìn)<b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>人工智能</b>的<b class='flag-5'>供電</b>
    主站蜘蛛池模板: 婷婷免费高清视频在线观看| 经典三级一区在线播放| 午夜视频在线网站| 日本不卡视频免费的| 怡红院色视频在线| 色视频在线播放| 久久综合婷婷| 在线干| 美女被免网站在线视频| 日韩dv| 最新天堂| 日韩第二页| 国产一区二区在线不卡| 天天色综合社区| 午夜色a大片在线观看免费| 欧美亚洲专区| 特黄毛片| 激情综合婷婷| 加勒比精品视频| 乌克兰毛片| 欧美精品videosex极品| 97影院理论| 91破处视频| 亚洲最新在线| 久久久精品久久久久久久久久久| 亚洲第一免费网站| 日本人69xxxxx| 色福利在线| 波多野结衣在线观看一区| 久久国产午夜精品理论片34页| 日本一区二区三区免费看| 免费的黄色的视频| 天天爽夜夜操| 亚洲伦理一区| 日本三级香港三级人妇99| 永久影视| 男人午夜视频| 久久亚洲一级毛片| 午夜操一操| 欧美午夜性| 天堂自拍|