在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

為AI計算釋放空間

安晟培半導體 ? 來源:未知 ? 2024-11-21 09:19 ? 次閱讀

無論是移動應用程序或數字商務等可見應用程序,還是航空公司定價算法或每次刷卡時激活的欺詐檢測系統等幕后流程,AI 都已成為我們日常生活中不可或缺的一部分。尤其是生成式 AI,預計未來十年將以兩位數的速度持續增長,到 2032 年市場規模可能達到1 萬億美元以上。

AI 技術的發展推動了對更強大的處理器的需求,尤其是 GPU,是構建 AI 基礎設施的重要組成部分。NVIDIA 在行業和市場占據著主導地位,AMD 也越來越受歡迎,但企業必須面對GPU 持續增加的功耗,部分型號甚至已經超過1kW,這一趨勢也導致全球數據中心功耗大幅增加。預計在 2022 年至 2026 年間還將翻一番,容量已然成為公共事業提供商和企業面臨的主要挑戰。

目前,大約80% 的數據中心運營商面臨功率限制,許多運營商對每機架功率限制在 10-20 kW的范圍內。雖然傳統方法證明,提高處理器性能和效率可以提高總功耗,但很多數據中心運營商已經達到功率上限,這也對企業的持續創新和增長造成了阻礙。此外,擴展機架空間或適應特殊的冷卻方法通常成本高昂或受到空間和法規的限制;老化的服務器基礎設施(許多服務器使用時間超過 5 年)也不斷增加維護成本和安全風險。

對此,最實用的解決方案是升級現有的基礎設施。及時的服務器更新能夠大幅整合機架空間,從而降低運營成本,回收電力預算,并支持部署能夠處理 AI 工作負載的現代服務器。在評估服務器更新時,運營商需要用新的方式來思考,只要新一代處理器的每瓦性能(即效率)提高,處理器功耗的增加就可以被接受,這意味著新服務器比舊服務器 “里程更長”。盡管最大機架功率預算有限并開始接近極限,通過專注于每機架的性能,企業可以優化現有的電力和空間,使他們能夠從數據中心的局限性轉為更加專注于業務的增長和創新。

Ampere 的云原生處理器旨在提供橫向擴展性能和領先的效率。AmpereOne 自研核是替代老舊服務器的最佳 CPU 選擇。在AmpereOne 效率白皮書中,詳細闡述了 AmpereOne 的效率優勢,相較 AMD EPYC 9004 系列處理器,如何使云原生和 AI 工作負載的每機架性能提高 67%。

以下是 7 個開源工作負載,從 Web 服務器和負載均衡器到數據庫,再到緩存和內存中數據存儲。它們在許多現代 Web 服務中頗受歡迎,因為它們通過緩存處理 web 流量管理、數據存儲和性能優化。

91c9f60c-a7a4-11ef-93f3-92fbcf53809c.png

在AI 計算時代,通過將 AI 推理工作負載添加到上述通用工作負載中,可以增強各個行業的產品和服務。下表展示了 AmpereOne 在機架級別的性能和效率,適用于推理工作負載,如推薦引擎(DLRM)、圖像處理(ResNet-50)以及以語言為中心的工作負載(Whisper和Llama3)。這些工作負載支持現代設施,例如聊天機器人、在電子商務網站上查看推薦的產品、在流媒體平臺上呈現“您可能喜歡的節目”,或者為直播電視流提供實時隱藏字幕。

91d59e44-a7a4-11ef-93f3-92fbcf53809c.png

對于前面提到的每機架可用功率有限的企業和服務提供商來說,實現每機架的最大性能尤為重要。即使是中等規模的企業,由 AI 驅動的 web 服務也可以從 AmpereOne 中受益。與 AMD EPYC Genoa 8 個機架的輸出相比,AmpereOne 可以在不犧牲性能水平的情況下,將機架空間減少 38%,將功率預算降低 37%,并將購置成本降低 49%。以下代理 web 服務包括作為前端 Web 服務器的 NGINX、作為鍵值存儲的 Redis、作為內存數據庫的 Memcached、作為關系數據庫的 MySQL,以及分別作為推薦引擎和聊天機器人的 AI 組件 DLRM 和 Llama3。

91e45d12-a7a4-11ef-93f3-92fbcf53809c.png

AmpereOne 可以通過更新老化的服務器來重新利用預算、空間和功率。我們展示了如何節約資本支出,如何通過降低功耗和管理開銷而實現運營支出的節省,在三年內為企業節省大量 TCO。相較 AMD EPYC Bergamo,運營商可以節省 33% 的成本;與 AMD EPYC Genoa 相比,可節省高達 41% 的成本,這都歸功于AmpereOne。

91f8aeca-a7a4-11ef-93f3-92fbcf53809c.png

無論公司規模大小,“AI 海嘯” 將繼續降低企業大規模實施 AI 的準入門檻。即使沒有資源去雇傭專門的 AI 團隊,企業也可以通過服務提供商來開啟 AI 之旅,并迅速投入生產。因此,整合傳統基礎設施為 AI 擴展釋放空間尤其重要。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 處理器
    +關注

    關注

    68

    文章

    19396

    瀏覽量

    230720
  • AI
    AI
    +關注

    關注

    87

    文章

    31429

    瀏覽量

    269832
收藏 人收藏

    評論

    相關推薦

    AI云端計算資源的多維度優勢

    AI云端計算資源,作為AI技術與云計算深度融合的產物,在成本效益、性能優化、數據安全、靈活擴展以及創新加速等多個維度都具有顯著優勢。下面,AI
    的頭像 發表于 01-07 11:11 ?85次閱讀

    使用 AMD Versal AI 引擎釋放 DSP 計算的潛力

    “Versal AI 引擎可以在降低功耗預算的情況下提高 DSP 計算密度,”高級產品營銷經理 Udayan Sinha 表示。這種效率使 Versal AI 引擎能夠在嚴格的功耗預算內處理最苛刻
    的頭像 發表于 11-29 14:07 ?611次閱讀

    AI云端計算資源有哪些類型

    AI云端計算資源涵蓋了從基礎設施到軟件服務的多個層面,AI模型的訓練、推理和部署提供了強大的支持。下面,AI部落小編為您詳細介紹
    的頭像 發表于 11-15 09:39 ?194次閱讀

    AI高性能計算平臺是什么

    AI高性能計算平臺不僅是AI技術發展的基石,更是推動AI應用落地、加速產業升級的重要工具。以下,是對AI高性能
    的頭像 發表于 11-11 09:56 ?252次閱讀

    AI for Science:人工智能驅動科學創新》第二章AI for Science的技術支撐學習心得

    計算的結合 我深刻體會到高性能計算(HPC)在AI for Science中的重要性。傳統的科學計算往往面臨計算量大、
    發表于 10-14 09:16

    華邦電子邊緣設備打造生成式AI性能

    在以大模型基礎的云端 AI 廣泛賦能各行各業后,邊緣設備對于 AI釋放出巨大需求,AI 也在從云端向邊緣端加速落地,層出不窮的應用場景
    的頭像 發表于 08-19 16:14 ?643次閱讀

    電機抱閘釋放時間控制

    最近碰到一個問題,在電機的抱閘釋放時接觸器兩端會拉弧,測量反電動勢277v,反接蓄流二級管后,發現反電動勢基本上被釋放,但是出現了制動器釋放時間較長約為350ms,會溜車。 測量抱閘
    發表于 08-05 13:44

    杭州靈伴科技向文杰:AR+AI,加速進入空間計算時代

    創始人向文杰發表主旨演講,向文杰認為,AR和AI的結合將是未來技術發展的重要方向,并將加速空間計算時代的到來。 ? AR與AI的深度融合 向文杰在演講中提到,AR(增強現實)和
    的頭像 發表于 06-20 09:09 ?370次閱讀
    杭州靈伴科技向文杰:AR+<b class='flag-5'>AI</b>,加速進入<b class='flag-5'>空間</b><b class='flag-5'>計算</b>時代

    利亞德新工廠投產,加速AI空間計算發展

    近日,位于美國俄勒岡州的利亞德旗下NaturalPoint公司宣布,其新工廠已正式投產。這一重要舉措將為利亞德·虛擬動點提供更多的研發和生產資源,從而加速公司在人工智能(AI)與空間計算領域的發展步伐。
    的頭像 發表于 06-11 10:43 ?658次閱讀

    銀牛微電子:集3D視覺感知、AI及SLAM一體的3D空間計算

    有限責任公司研發副總裁周凡在論壇上介紹了“集3D視覺感知、AI及SLAM一體的3D空間計算芯片NU4500”。 ? 合肥銀牛微電子有限責任公司研發副總裁周凡 ? 銀牛微電子是一家專注
    的頭像 發表于 05-17 10:18 ?1026次閱讀
    銀牛微電子:集3D視覺感知、<b class='flag-5'>AI</b>及SLAM<b class='flag-5'>為</b>一體的3D<b class='flag-5'>空間</b><b class='flag-5'>計算</b>芯

    一圖看懂星河AI數據中心網絡,全面釋放AI時代算力

    華為中國合作伙伴大會 | 一圖看懂星河AI數據中心網絡,以網強算,全面釋放AI時代算力
    的頭像 發表于 03-22 10:28 ?807次閱讀
    一圖看懂星河<b class='flag-5'>AI</b>數據中心網絡,全面<b class='flag-5'>釋放</b><b class='flag-5'>AI</b>時代算力

    基于 GPU 渲染的高性能空間包圍計算

    空間包圍檢測在計算機圖形學、虛擬仿真、工業生產等有著廣泛的應用。
    的頭像 發表于 02-18 10:47 ?710次閱讀
    基于 GPU 渲染的高性能<b class='flag-5'>空間</b>包圍<b class='flag-5'>計算</b>

    什么是AI邊緣計算AI邊緣計算的特點和優勢介紹

    隨著人工智能的迅猛發展,AI邊緣計算成為了熱門話題。那么什么是AI邊緣計算呢?簡單來說,它是將人工智能技術引入邊緣計算的新興領域,旨在將
    的頭像 發表于 02-01 11:42 ?956次閱讀

    虹軟空間計算技術推動XR領域發展

    和虛擬現實增強技術的演進,“空間計算技術”應運而生,這下一代移動平臺,特別是XR智能終端的發展帶來新的前景。
    的頭像 發表于 01-26 10:15 ?751次閱讀

    AI如何助力我們構建更智能的空間?利用AI構建智能空間的5種方式

    當下業界都聚焦于生成式 AI 如何推動未來變革,但我們也不妨回顧一下過去的一年,AI 如何助力我們構建更智能的空間
    的頭像 發表于 01-24 18:19 ?1126次閱讀
    主站蜘蛛池模板: 日本高清视频色wwwwww色| 日本网站免费| 欧洲一卡二卡乱码新区| 毛片网在线| 欧美一区二区三区四区视频 | 看毛片的网站| 激情综合五月网| 国产哺乳期奶水avav| 在线视频综合网| 天天弄天天干| 可以免费看黄色的网站| haodiaose在线精品免费观看| 欧美人与zoxxxx另类9| 亚洲视频一区| 欲香欲色| 色倩网站| 狠狠狠| www.亚洲视频.com| 神马影视午夜| 亚洲好骚综合| 日本久操视频| 人人爽影院| 高h 男男| 三级视频中文字幕| 国模私拍视频在线| 五月天亚洲婷婷| 亚洲欧美啪啪| 最新日韩中文字幕| 欧美不卡在线视频| 五月婷婷六月激情| 噜噜吧噜噜色| 午夜在线| 视频在线免费观看网址| 国产在线精品一区免费香蕉 | 好爽好大www视频在线播放| 中文字幕婷婷| 男人天堂色男人| 亚洲第一在线播放| 啪啪亚洲| 午夜免费影院| 国产亚洲高清在线精品不卡|