金秋已至。伴著涼爽的秋風一起到來的,還有 OpenVINO 工具套件剛剛推出的最新版本 OpenVINO 2022.2。除了能支持英特爾今年新推出的一系列獨立顯卡進行 AI 模型的推理加速及部署外,2022.2的新版本中還有哪些亮眼的新特性呢?讓我們一起來看看吧。
01
更廣泛的模型和硬件支持
新增包括英特爾獨立顯卡等的硬件支持,并減少動態輸入時的內存消耗、提升 NLP 應用效率。
02
更好的性能及可移植性
通過跨 CPU、GPU 等的自動設備發現(automatic device discovery)功能、負載平衡和動態推理并行,立即提高性能。
03
更多的集成
與深度學習框架實現更好的集成,以最少的代碼更改,更好地與框架保持一致。
下面讓我們一起來詳細了解一下這些主要的新特性。
01
更廣泛的模型和硬件支持
OpenVINO 2022.2 新版本提供了更廣法的模型和硬件支持,包括:
01
新增:支持英特爾 第13代酷睿 臺式機處理器(代號為 Raptor Lake);
02
新增:支持用于深度學習推理工作負載的獨立顯卡,包括英特爾 數據中心 GPU Flex 系列和英特爾 Arc,可用于智能云、邊緣和媒體分析工作負載;
03
新增:對第四代英特爾 至強 可擴展處理器(代號為Sapphire Rapids)的預覽支持,測試您的模型性能;
04
優化減少動態輸入時 CPU 的內存消耗,從而更高效支持自然語言處理(NLP)的應用。
02
更好的性能及可移植性
通過跨 CPU、GPU 等的自動設備發現、負載平衡和動態推理并行性,立即看到性能提升。
01
新增:在 AUTO 功能中引入新的性能傾向選擇“Cumulative
throughput”,使多個加速器(例如多個 GPU)可被添加到 AUTO 的自動發現、配置的基本功能中,能夠被同時使用,以最大限度地提高推理性能。
02
推出英特爾 FPGA AI Suite,在這個易于使用的軟件包中實現實時、低延遲和低功耗的深度學習推理。
03
更多的集成
面向尚未安裝本機 OpenVINO 工具套件的用戶,提供了更多的與深度學習框架的集成,使得開發者使用和維護代碼更加簡單方便,同時保持更新時需要修改的代碼最少。
01
最近更新的 OpenVINO Execution Provider for ONNX Runtime 通過輕松添加 OpenVINO,為 ONNX 運行時開發人員提供了更多性能優化選擇。
02
新增:通過 OpenVINO 與 PyTorch ONNX Runtime 的融合(OpenVINO Torch-ORT),加速 PyTorch 模型推理。現在,PyTorch 開發人員可以更無縫地與 OpenVINO 集成,并通過更少的代碼更改獲得性能提升。OpenVINO 與 TensorFlow 的集成現在支持更深入的學習模型和改進的推理性能。
03
OpenVINO 與 TensorFlow 的集成現在支持更深入的學習模型和改進的推理性能。
以上就是OpenVINO 2022.2新版本的主要新特性介紹,除此之外,新版本中還增加了一些新的算子的支持,增加了對集成顯卡的優化等等。
-
英特爾
+關注
關注
61文章
9997瀏覽量
172031 -
gpu
+關注
關注
28文章
4760瀏覽量
129135 -
硬件
+關注
關注
11文章
3356瀏覽量
66345 -
AI
+關注
關注
87文章
31287瀏覽量
269643 -
模型
+關注
關注
1文章
3279瀏覽量
48974
原文標題:官宣:支持英特爾獨立顯卡的OpenVINO? 2022.2新版本來啦
文章出處:【微信號:英特爾物聯網,微信公眾號:英特爾物聯網】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論