在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

基于 ODLA 的異構 AI 硬件對接方案介紹

lhl545545 ? 來源:與非網 ? 作者:與非網 ? 2020-09-25 17:25 ? 次閱讀

在剛剛結束的 2020 云棲大會上,阿里云宣布對行業開源業界首個深度學習開放接口標準 ODLA(Open Deep Learning API)。阿里云在今年 5 月份的 OCP 全球峰會上首次對外公布 ODLA 接口標準,并宣布已率先在 Graphcore 等生態伙伴上獲得支持。IPU 是 Graphcore 為機器智能從零設計的 AI 處理器,通過 ODLA 接口,開發者可以在 IPU 上快速跑通 AI Matrix 的各類模型。

基于 ODLA 的異構 AI 硬件對接方案介紹

張偉豐博士在 2020 OCP 全球峰會上公布 ODLA 接口標準

ODLA 是一個為加速深度學習的統一異構硬件編程接口。ODLA 規范了深度學習計算任務的定義和執行,實現上層應用和底層異構硬件平臺的解耦,讓 AI 異構計算更簡單,實踐代碼“生成一次,隨時鏈接,隨處執行”的愿景。

“令人興奮的新應用程序意味著我們對數據中心的期望比以往任何時候都要更高。我們希望通過使用更廣泛的硬件選擇,以更大的規模,擴大操作類型范圍。ODLA 使我們能夠管理這種復雜性,并挖掘出這些出色的新技術的全部潛力?!盙raphcore 高級副總裁兼中國區總經理盧濤表示。

阿里云開發 ODLA 是為了解決異構計算中存在許久的一個核心挑戰。ODLA 是輕量高效的異構硬件統一接口標準,可在異構計算環境中實現效率最大化。在異構計算環境中,軟件框架需要從專業芯片中獲得最高性能,需要多種類型處理器在一個通用平臺上協同工作,而每種處理器都需要針對其架構和專業知識領域進行某種程度的優化,例如 AI 的稀疏性。API 提供的抽象級別可以適應芯片架構之間的差異。

基于 ODLA 的異構 AI 硬件對接方案

通過 ODLA,在 Graphcore IPU 上技術適配和應用部署的工作量可以實現大幅度降低,且實現效率大幅提升。另外,通過 ODLA 可以更好的與 AI 計算框架進行軟硬協同,快速利用現有的編譯優化技術,達到最佳性能。對于異構任務,ODLA 充當該系統范圍通用語言與特定于架構的優化之間的接口或轉換器,該優化可從 Graphcore 的 IPU 等設備實現最佳性能。

對于數據中心運營商而言,除了簡化了新微處理器技術的集成之外,ODLA 還帶來了其他一系列好處。它支持通用和高性能的數據中心設置,并為高級應用程序提供統一的加速框架。對于應用程序開發人員來說,它減少了對不同架構進行重復優化的需求,并應該可以減少開發成本,縮短產品上市時間。

ODLA 在 2020 云棲大會上宣布的主要特性及優勢包含:

透明接口層,零損耗。

接口抽象和統一,軟硬件解耦:通過面向 AI 的多粒度算子抽象,定義統一的接口,解耦具體軟硬件,平滑遷移業務;實現代碼復用,提升開發和部署效率。

多模態執行方式:支持多種執行模式,覆蓋解釋執行、編譯執行、載入預編譯代碼等場景,兼容各種硬件的運行模式。

AI 全場景支持:支持推理和訓練,適配云、邊、端全場景 AI 業務;擁有廣泛的算子定義和豐富的接口(設備管理、會話管理、執行管理、事件同步 / 異步、資源查詢、性能監控等)。

卓越的擴展性,支持 AI 芯片廠家獨特屬性和自定義算子。

張偉豐博士在云棲大會上宣布開源 ODLA

Graphcore 公司相信,IPU 將成為下一代數據中心 AI 工作負載的核心。我們深知,我們的愿景需要 ODLA 在內的諸多框架和工具,這些框架和工具能使我們的產品與其他同類最佳技術協同工作。

Graphcore 的聯合創始人兼首席執行官 Nigel Toon 表示:“ODLA 優雅地滿足了 Graphcore 新用戶的兩個最大需求。一是他們希望輕松地將我們的技術集成到現有的數據中心,二是他們希望確保最終的設置在從各個組件到整個系統的每個層級都能得到高度優化。”
責任編輯:pj

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 處理器
    +關注

    關注

    68

    文章

    19395

    瀏覽量

    230672
  • AI
    AI
    +關注

    關注

    87

    文章

    31399

    瀏覽量

    269805
  • 阿里云
    +關注

    關注

    3

    文章

    969

    瀏覽量

    43175
收藏 人收藏

    評論

    相關推薦

    移遠通信推出AI智能玩具解決方案

    充分利用了其無線通信解決方案的強大通信能力,以及全鏈路的音頻AI算法。同時,該方案還深度融合了豆包等大模型的先進AI技術和豐富的數據資源,實現了智能玩具與云端
    的頭像 發表于 01-16 11:33 ?231次閱讀

    進迭時空 K1 系列 8 核 64 位 RISC - V AI CPU 芯片介紹

    需要大量向量計算的任務中表現出色,例如圖像和視頻處理等。(三)通用的 AI 算力融合方式 :以 CPU 核融合方式提供原生 AI 算力。生態對接 :實現與所有主流 AI 生態的快速
    發表于 01-06 17:37

    唯創知音WT3000A AI智能對話方案介紹

    AI
    WT-深圳唯創知音電子有限公司
    發布于 :2025年01月02日 11:02:41

    壁仞科技聯合中國電信等合作伙伴共同發布智算異構四芯混訓解決方案

    工智能實驗室等發布了“智算異構四芯混訓解決方案”,打造算力、網絡、平臺、通信庫、框架全棧異構方案,實現異構算力的互聯互通、互調互算,基于壁仞
    的頭像 發表于 12-07 17:56 ?1224次閱讀

    AI 識別 - 基于恩智浦 MCX N947 實現咖啡膠囊識別方案介紹

    AIChatGPT
    大大通
    發布于 :2024年11月12日 14:07:30

    深蕾半導體ASTRA AI詳細介紹

    ASTRA AI芯片是一種集成了多種計算單元(包括NPU/uNPU、GPU、CPU、DSP等)的異構計算系統級芯片(SOC),專為處理復雜的人工智能(AI)任務而設計。這種設計使得ASTRA
    的頭像 發表于 09-12 16:49 ?429次閱讀
    深蕾半導體ASTRA <b class='flag-5'>AI</b>詳細<b class='flag-5'>介紹</b>

    淺談國產異構雙核RISC-V+FPGA處理器AG32VF407的優勢和應用場景

    任務優化計算資源,提高整體計算效率。 靈活性與可擴展性 : FPGA的靈活性允許用戶根據需求重新配置硬件邏輯,實現高度定制化的解決方案。結合RISC-V的開放架構,用戶可以更容易地根據應用需求調整
    發表于 08-31 08:32

    開啟全新AI時代 智能嵌入式系統快速發展——“第六屆國產嵌入式操作系統技術與產業發展論壇”圓滿結束

    操作系統標準化的最新進展。 華為計算產業戰略規劃總監周明耀在論壇上做了“華為在AI硬件上積累及生態戰略”專題報告。周明耀介紹華為計算產業在AI
    發表于 08-30 17:24

    安謀科技異構算力組合,破局生成式AI算力挑戰

    近日,此芯科技集團有限公司(以下簡稱“此芯科技”)AI PC戰略暨首款芯片發布會在上海舉行,正式推出了其首款專為AI PC打造的異構高能效芯片產品——“此芯P1”。作為國產新一代AI
    的頭像 發表于 08-13 09:12 ?606次閱讀

    安謀科技異構算力賦能AI計算,此芯科技首款AI PC芯片發布

    7月30日,此芯科技集團有限公司(以下簡稱“此芯科技”)AI PC戰略暨首款芯片發布會在上海舉行,正式推出了其首款專為AI PC打造的異構高能效芯片產品——“此芯P1”。作為國產新一代AI
    發表于 07-31 14:36 ?1073次閱讀
    安謀科技<b class='flag-5'>異構</b>算力賦能<b class='flag-5'>AI</b>計算,此芯科技首款<b class='flag-5'>AI</b> PC芯片發布

    異構混訓整合不同架構芯片資源,提高算力利用率

    的解決方案。通過混合使用多種異構芯片,可以充分利用不同芯片的優勢,提高算力利用率,降低算力成本,并推動AI技術的廣泛應用。 ? 異構混訓能夠整合不同架構芯片資源 ? 在2024年世界人
    的頭像 發表于 07-18 00:11 ?3559次閱讀

    開發者手機 AI - 目標識別 demo

    。 NNRt host 實現了NNRt HDI接口功能,通過對接底層AI芯片接口為上層應用提供NPU硬件推理的能力。 功能實現 JS從相機數據流獲取一張圖片,調用Native的接口進行目標識別的處理
    發表于 04-11 16:14

    邁爾微視重磅推出高精度對接相機M4 Mega

    為移動機器人、人形機器人貨物抓取、高精度對接提供3D視覺+AI一體化解決方案。
    的頭像 發表于 03-19 10:14 ?777次閱讀
    邁爾微視重磅推出高精度<b class='flag-5'>對接</b>相機M4 Mega

    高通NPU和異構計算提升生成式AI性能?

    異構計算的重要性不可忽視。根據生成式AI的獨特需求和計算負擔,需要配備不同的處理器,如專注于AI工作負載的定制設計的NPU、CPU和GPU。
    的頭像 發表于 03-06 14:15 ?862次閱讀

    CES AI硬件層出不窮:你愿為AI的溢價買單嗎?

    硬件AI
    電子發燒友網官方
    發布于 :2024年01月30日 16:36:00
    主站蜘蛛池模板: 成 人 黄 色视频免费播放| 色老二精品视频在线观看| 天天操天天操天天操香蕉| 国产日韩一区二区三区| 日本三级日本三级日本三级极 | 免费视频www| 99福利| 色综合天天综合网亚洲影院| 电影一区二区三区| 国产一级特黄毛片| 国产又黄又免费aaaa视频| 久久婷婷激情综合色综合也去| 奇米77| 欧美一级做一级做片性十三| 色在线网站免费观看| 色激情小说| 嫩草影院在线入口| 激情五月开心婷婷| 爆操极品美女| 午夜在线看片| 喷潮白浆| 波多野结衣一级毛片| 成人午夜在线观看国产| 成人欧美另类人妖| 1000部又爽又黄的做黄禁片| 婷婷 色天使| 亚洲专区一路线二| 亚洲国产成人久久三区| 色天天综合网色鬼综合| 欧美日韩国产一区二区三区不卡| 毛片小视频| 丁香婷婷色| 天天操天天干天天射| 99国产福利| 日本级毛片免费观看| kkkbo色综合| 三级特黄视频| 国产女乱淫真高清免费视频| 午夜影院在线免费| 视频在线播放免费| 福利视频一区二区三区|