在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

ChatGPT引領AI技術變革,帶動服務器需求增量

安防監控存儲聯盟 ? 來源:安防監控存儲聯盟 ? 2023-02-23 10:50 ? 次閱讀

OpenAI GPT 技術的聊天機器人,其擁有 3000 億單詞的語料基礎,預訓練出擁有 1750 億個參數的模型,海量的參數與強大的智能交互能力離不開背后算力和服務器的支撐。據我們測算,若未來 ChatGPT 達到 10 億日活,每人平均 10000字左右問題,則需新增服務器投入 46.30 萬臺。服務器的需求起量為上游的存儲/PCB/模擬市場帶來新增量。我們預計,單臺服務器帶來的 PCB 價值量約為 4000元,而 AI 服務器放量亦將帶來 DDR5 和 HBM 存儲用量的快速提升。

01

ChatGPT:引領內容生成式 AI 行業變革

此前微軟宣布將在未來向 OpenAI 投資 100 億美元,并將 ChatGPT 的技術整合到最新版本的必應搜索引擎和 Edge 瀏覽器中。微軟這一舉動拉開了大型科技公司 AI 競賽的序幕,谷歌亦宣布推出 Bard 對抗 ChatGPT,國內百度、騰訊等科技巨頭亦在加緊推出自己的生成式 AI

從 2018 年 OpenAI 開發出 GPT-1 開始,GPT 模型的智能化程度不斷提升,ChatGPT 是從 GPT3.5 系列中的模型進行微調而誕生的,此前 OpenAI 還設計了GPT-1、GPT-2 和 GPT-3 模型。相比于前幾代 GPT 模型,ChatGPT 具有類似人類的情境感知和回饋能力,在語言識別、判斷和交互層面實現了較好的效果。除此之外,OpenAI 旗下還有可生成圖片內容的 AI 應用 Dall-E,高智能化的內容生成式 AI 有望在未來一段時間內改變人類科技發展的格局,讓智能化廣泛進入人們的日常生活。

3d3c4614-b320-11ed-bfe3-dac502259ad0.png

ChatGPT 為人類開拓出了訓練大語言模型的新道路。ChatGPT 在擁有 3000億單詞的語料基礎上預訓練出擁有 1750 億個參數的模型(GPT-2 僅有 15 億參數),預訓練數據量從 5GB 增加到 45TB。ChatGPT 證明了在高算力的支持下,千億級參數規模的模型訓練+人類反饋,可以使 AI 融合世界的知識和規則,極大提升模型表現。

3d75e068-b320-11ed-bfe3-dac502259ad0.png

02

ChatGPT 拉動算力需求快速增長

ChatGPT 參數量、數據量高度擴張,算力需求劇增。從 2018 年起,OpenAI就開始發布生成式預訓練語言模型 GPT(Generative Pre-trained Transformer),可用于生成文章、代碼、機器翻譯、問答等各類內容,每一代 GPT 模型的參數量都快速增長:2019 年 2 月發布的 GPT-2 參數量為 15 億,而 2020 年 5 月的 GPT-3,參數量達到了 1750 億。

3d9f4354-b320-11ed-bfe3-dac502259ad0.png

ChatGPT 海量的參數與強大的智能交互能力,離不開算力的支撐。根據Similarweb 的數據,23 年 1 月份 ChatGPT 日活約 1300 萬人,累計用戶已超 1億人,創下了互聯網最快破億應用的記錄。若 ChatGPT 日活達至 1 億人,每人平均 1000 字左右的問題,那么需要多大的算力資源支持?

我們建立計算假設如下:

1) 假設均采用英偉達 DGX A100 服務器:該服務器單機搭載 8 片 A100GPU,AI 算力性能約為 5 PetaFLOP/s,單機最大功率約為 6.5kw;

2) ChatGPT 日活達至 1 億人,每人平均 1000 字左右問題;

3) 自回歸語言模型以 token 作為單位進行數據處理和計算,在英文環境下,一般 750 個單詞等于 1000 個 token。最常見的 Transformer 類語言模型在推理過程中每個 token 的計算成本(以 FLOPs 為指標)約為 2N,其中 N 為模型參數數量(20 年發布的 GPT-3 擁有 1750 億參數,22 年谷歌發布的 PaLM 擁有 5400 億參數,假定 ChatGPT 為 3000 億參數);

4) 模型的 FLOPs 利用率為 20%;

5) 假定訪問峰值是一天均值的 5 倍;

若 ChatGPT 日活達至 1 億人,每人平均 1000 字左右的問題,初始服務器投入需 4630 臺。粗略估計 ChatGPT 1000 字左右的問題需要的算力資源為2*3000 億*1000*1.333/20%=4PetaFLOP,而 ChatGPT 日活約 1 億人,若每人平均 1000 字左右的問題,假設 24 小時平均分配任務,則所需算力為 1 億*4PetaFLOP/(24*3600s)=4630PetaFLOP/ s。考慮訪問流量存在峰值,假定訪問峰值是一天均值的 5 倍,而單臺英偉達 DGXA100 系列服務器算力為 5 PetaFLOP/s,則需要對應服務器數量為 4630PetaFLOP/s*5/ PetaFLOP/s=4630 臺。

而若未來 ChatGPT 日活達至 10 億人,每人平均 10000 字左右問題,則有望帶動約 46.30 萬臺。

3e0f7502-b320-11ed-bfe3-dac502259ad0.png

且考慮谷歌每日搜索量已達 35 億次,長期來看 ChatGPT 日活有廣闊的提升空間,算力需求將持續釋放。此外,若考慮 ChatGPT 嵌入終端應用后,其對算力資源的消耗量或將成數倍級增長,所需服務器數量需求更是成數倍級提升。

文字交互僅是大模型用量的起點,未來圖像、視頻等多種形態帶動算力需求大幅提升。ChatGPT 目前仍主要停留在文字交互層面,但圖像、視頻等領域也可使用 Transformer 大模型,所需算力規模遠大于文字交互。例如 OpenAI 的繪畫 AI模型 DALL-E2,其可直接根據文字生成逼真的圖像,也可以對現有圖像上根據文字指令創建新作品。

3e3761fc-b320-11ed-bfe3-dac502259ad0.png

03

上游存儲/PCB/模擬受益 ChatGPT 需求新增量

ChatGPT 拉動服務器需求快速增長的同時,將直接拉動算力芯片需求增長,我們于下文中詳細對算力芯片需求進行了介紹。此外,服務器需求的增長,也將帶動上游存儲/PCB/模擬的需求快速增長。

1)ChatGPT 新時代,服務器需求帶動 DDR5 和 HBM 用量快速提升。隨著ChatGPT 等應用開啟 AI 新時代,全球數據生成、儲存、處理量有望呈等比級數增長,而 DDR5 內存和高帶寬存儲器(HBM)可支持更高速率的帶寬。對于計算-內存而言,DDR5 標準的最高速率是 DDR4 的兩倍,而 HBM 基于 TSV 和芯片堆疊技術的堆疊 DRAM 架構,可實現高于 256GBps 的突破性帶寬。深度學習人工智能的快速發展對數據運算的要求越來越高,隨著數據指數式增長,內存墻對于計算速度的影響越來越凸顯,而 DDR5 和 HBM 技術可以幫助數據中心突破“內存墻”瓶頸。我們看好在 ChatGPT 的帶動下,服務器 DDR5 和 HBM 的滲透率有望加速提升

3e6a3050-b320-11ed-bfe3-dac502259ad0.png

2) ChatGPT 帶動 PCB 需求新增量。服務器內部涉及 PCB 的主要部件包括主板、電源背板、網卡、Riser 卡、硬盤背板等,PCB 在 AI 服務器應用中對板厚、層數、工藝等有著更高的要求,具有高層數、高密度及高傳輸速率的特點。

PCB 層數越多,設計越靈活,能夠對電路起到更好地抗阻作用,更易于實現芯片之間地高速傳輸,單位價值量也越高。PCIe3.0 接口信號傳輸速率為 8GT/s,對應的服務器 PCB 板為 8-10 層;PCIe4.0 接口的傳輸速率為 16GT/s,使用的服務器 PCB 層數為 12-14 層,目前滲透率在快速提高,如英偉達 DGXA100 系列服務器就采用了 PCIe4.0 接口;服務器平臺下一步將升級到 PCIe 5.0,傳輸速率為32GT/s,PCB 的層數可達 18 層。隨著 ChatGPT 對算力要求的提升,預計服務器PCB 將呈量價齊升的態勢,保守估計每臺服務器的 PCB 價值量可達 4000 元。

3e9d4ea4-b320-11ed-bfe3-dac502259ad0.png

3)ChatGPT 拉動服務器建設的同時,亦帶來大量電源管理芯片需求。從市電輸入服務器開始,到電流輸入 CPU元器件止,大體上需要經過三次電流的改變。第一次是經過服務器的電源模塊,將市電從交流電轉換成 48V 的直流電(ACDC)。接下來,該直流電會被輸送至 DC/DC 變換器,進一步被轉換成 12V,提供給中間母線結構(IBA)。最后該 12V 母線電壓將被分配至板上多個負載點(PoL)變換器中,為芯片或子電路提供電源。不過由于主板上 CPU 等內核器件與風扇等

其他器件對功率的要求各不相同,因此需要分開處理。對于 CPU 等內核器件,往往需要使用多相電源供電,而對于部分功率較小且比較穩定的其他器件,不需要使

用多相電源,只需要使用 Buck 進行降壓就可以對其進行供電。具體而言,主板上的電源管理 IC 主要包括 eFuse/熱插拔、多相電源、LDO 與降壓 Buck 等四類。

3f82a490-b320-11ed-bfe3-dac502259ad0.png

審核編輯 :李倩

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 服務器
    +關注

    關注

    12

    文章

    9164

    瀏覽量

    85429
  • ai技術
    +關注

    關注

    1

    文章

    1275

    瀏覽量

    24327
  • OpenAI
    +關注

    關注

    9

    文章

    1089

    瀏覽量

    6517
  • ChatGPT
    +關注

    關注

    29

    文章

    1561

    瀏覽量

    7675

原文標題:ChatGPT 引領 AI 技術變革,帶動服務器需求增量

文章出處:【微信號:S3ITIA-,微信公眾號:安防監控存儲聯盟】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    ChatGPT短暫“罷工”,云服務器還能用嗎?

    日,備受歡迎的AI聊天機器人ChatGPT突然遭遇了一次短暫的服務中斷,這讓不少用戶心生疑慮:云服務器,這個支撐起無數互聯網應用的強大后盾,究竟還靠譜嗎?
    的頭像 發表于 12-12 11:45 ?130次閱讀

    超微電腦AI服務器出貨數據彰顯強勁需求

    超微電腦(Super Micro Computer)周一公布的出貨數據,揭示了客戶對AI服務器的巨大需求。據超微透露,公司近期為多個大型AI工廠及云
    的頭像 發表于 10-08 14:54 ?357次閱讀

    什么是AI服務器AI服務器的優勢是什么?

    AI服務器是一種專門為人工智能應用設計的服務器,它采用異構形式的硬件架構,通常搭載GPU、FPGA、ASIC等加速芯片,利用CPU與加速芯片的組合來滿足高吞吐量互聯的需求,為自然語言處
    的頭像 發表于 09-21 11:43 ?867次閱讀

    AI服務器:開啟智能計算新時代

    一、AI服務器的定義與特點 AI服務器的定義 AI服務器是一種基于云計算
    的頭像 發表于 08-09 16:08 ?878次閱讀

    探索新潮流 — AI服務器引領數據中心的發展

    電子發燒友網站提供《探索新潮流 — AI服務器引領數據中心的發展.pdf》資料免費下載
    發表于 07-26 13:35 ?363次下載

    AI服務器的特點和關鍵技術

    AI服務器,即人工智能服務器,是一種專門設計用于運行和加速人工智能(AI)算法與模型的硬件設備。隨著人工智能技術的快速發展和普及,
    的頭像 發表于 07-17 16:34 ?1621次閱讀

    ai服務器是什么架構類型

    AI服務器,即人工智能服務器,是專門為人工智能應用設計的高性能計算服務器AI服務器的架構類型有
    的頭像 發表于 07-02 09:51 ?1074次閱讀

    ai服務器和通用服務器的區別在哪

    AI服務器和通用服務器的區別主要體現在以下幾個方面: 硬件配置 AI服務器和通用服務器在硬件配置
    的頭像 發表于 07-02 09:46 ?1049次閱讀

    差分晶振在AI服務器中的應用案例

    隨著ChatGPT技術不斷發展和應用,我國AI服務器市場保持較快增速(預計 2023年我國服務器市場規模將增至308億美元),而
    發表于 06-17 15:15 ?1次下載

    英飛凌推出全新CoolSiC? 400V MOSFET系列,滿足AI服務器需求

    擴展至400V領域,并推出了全新的CoolSiC?400VMOSFET系列。這一創新產品不僅滿足了AI服務器電源(PSU)日益增長的功率需求,同時保持了服務器機架規
    的頭像 發表于 05-29 11:36 ?794次閱讀
    英飛凌推出全新CoolSiC? 400V MOSFET系列,滿足<b class='flag-5'>AI</b><b class='flag-5'>服務器</b><b class='flag-5'>需求</b>

    RISC-V在服務器方面應用與發展前景

    RISC-V在服務器方面的應用與發展前景十分廣闊。作為一種開源、開放、簡潔、靈活的指令集,RISC-V近年來在芯片產業中發展迅速,并逐漸引領新一輪處理芯片技術與產業的
    發表于 04-28 09:04

    RISC-V在服務器方面的應用與發展前景如何?剛畢業的學生才開始學來的及嗎?

    RISC-V在服務器方面的應用與發展前景十分廣闊。作為一種開源、開放、簡潔、靈活的指令集,RISC-V近年來在芯片產業中發展迅速,并逐漸引領新一輪處理芯片技術與產業的
    發表于 04-28 08:49

    AI引領存儲市場變革 HBM與DDR5需求暴增

    AI成了存儲市場的最大增量。開源證券表示,搭載容量方面,隨著AI在各類領域的應用延伸,手機、服務器、PC中DRAM和NAND單機平均搭載容量均有增長,其中,
    發表于 03-06 11:41 ?445次閱讀

    【國產FPGA+OMAPL138開發板體驗】(原創)6.FPGA連接ChatGPT 4

    訪問ChatGPT 4這樣的AI模型是非常復雜的,因為這涉及到大量的數據傳輸、協議實現、并行處理、優化等等。更重要的是,ChatGPT 4這樣的模型通常是運行在強大的服務器集群上。不過
    發表于 02-14 21:58

    生成式AI商業進程加速,將帶動芯片需求增

    成式人工智能芯片銷售額可能達到500億美元以上。 ? 生成式AI 帶動芯片需求增長 ? 生成式人工智能(GAI)是利用復雜的算法、模型和規則,從大規模數據集中學習,以創造新的原創內容的人工智能
    的頭像 發表于 01-30 00:47 ?5459次閱讀
    主站蜘蛛池模板: 美女天天操| 欧美30p| 91最新网站免费| 性欧美视频videos6一9| 六月丁香色婷婷| 天天操婷婷| 美女张开腿让男生桶出水| 日韩美香港a一级毛片| 4虎最新地址| 六月激情丁香| 色噜噜狠狠狠狠色综合久| aaaa视频| 国产视频黄| 三级理论手机在线观看视频| 中国一级特黄剌激爽毛片| 亚洲qingse中文在线| 视频在线欧美| 亚洲精品视频在线| 亚洲精品免费视频| 免费网站日本永久免费观看| 欧美奇米| 亚洲成a人片在线观看尤物| 国产1区二区| 分分精品| 欧美黄色三级视频| 久操免费在线| 天天寡妇色| 五月天婷婷精品视频| 狠狠色噜噜狠狠狠狠五月婷| 激情五月婷婷在线| 亚洲haose在线观看| 日本三级香港三级人妇网站| 日日爽视频| 亚色在线视频| 午夜免费一级片| 中日韩免费视频| freesexvideo性欧美2| 特大一级aaaaa毛片| 国产免费一区二区三区| 国产床戏无遮掩视频播放| 医生好大好硬好爽好紧|