NVIDIA 在 Microsoft Build 開發者大會上展示了與 Microsoft Azure 和 Windows PC 的集成解決方案,簡化了 AI 模型部署并優化了路徑規劃和應用性能。
如果說經過優化的 AI 工作流如同一個完美的交響樂團,從硬件基礎設施到軟件庫的每一個組成部分都恰到好處,那么 NVIDIA 與微軟長期以來的默契合作對于開發者來說便如同悅耳的音樂。
微軟開發的 Phi-3 系列小語言模型等最新 AI 模型經過優化后,可在 NVIDIA GPU 上運行,并以 NVIDIA NIM 推理微服務的形式提供。NVIDIA 開發的其他微服務,如 cuOpt 路徑優化 AI 等,正作為 NVIDIA AI Enterprise 軟件平臺的一部分被定期添加到 Microsoft Azure Marketplace 中。
除了這些 AI 技術之外,NVIDIA 和微軟還為開發者提供越來越多的優化和集成功能,幫助他們為搭載有 NVIDIA GeForce RTX 和 NVIDIA RTX GPU 的 PC 創建高性能 AI 應用。
基于在 NVIDIA GTC 上所公布的進展,兩家公司在今年于西雅圖舉行的年度開發者盛會 Microsoft Build 上進一步推進這一長期合作。
加速微軟的 Phi-3 模型
微軟正在擴展其 Phi-3 開源小語言模型系列,增加了小型(70 億參數)和中型(140 億參數)模型,類似于擁有 38 億個參數的 Phi-3 Mini。另外,微軟還推出了一個新的 42 億參數多模態模型 Phi-3-vision,支持圖像和文本。
所有這些模型均通過 NVIDIA TensorRT-LLM 實現了 GPU 優化,并以 NVIDIA NIM 的形式提供。NVIDIA NIM 是具有標準應用編程接口(API)的加速推理微服務,可以部署在任何位置。
您可在ai.nvidia.com上或通過 Azure Marketplace 上的 NVIDIA AI Enterprise,獲取由這些 NIM 支持的 Phi-3 模型的 API。
NVIDIA cuOpt
現已登陸 Azure Marketplace
NVIDIA cuOpt 是一項適用于路徑優化的 GPU 加速 AI 微服務,該服務現在通過 NVIDIA AI Enterprise 在 Azure Marketplace 上架。cuOpt 所采用的大規模并行算法能夠實現航運服務、鐵路系統、倉庫和工廠的實時物流管理。
該模型在主要的路徑基準測試中創造了二十多項世界紀錄,展現出最高的準確性和最快的速度。通過優化車輛路線、節省行路時間和減少空閑時間,它能夠為物流和供應鏈行業節省數十億美元。
通過 Azure Marketplace,開發人員可以輕松地將 cuOpt 微服務與 Azure 地圖集成,在企業級管理工具和安全性的支持下,支持實時物流管理和其他基于云的工作流。
使用 NVIDIA RTX 優化 PC 的 AI 性能
NVIDIA 加速計算平臺是現代 AI 的中堅力量,可幫助開發者為全球超過 1 億臺 Windows GeForce RTX PC 和 NVIDIA RTX 工作站構建解決方案。
NVIDIA 和微軟正在為 Windows 開發者打造能夠加速下一代 PC 和工作站應用 AI 性能的全新優化和集成,包括:
通過 NVIDIA DirectX 驅動、Generative AI ONNX Runtime 擴展和 DirectML 提高大語言模型(LLM)的推理性能。NVIDIA GeForce Game Ready、NVIDIA Studio 和 NVIDIA RTX Enterprise 驅動現已提供這些優化,在 NVIDIA GeForce RTX GPU 上提供至高可達 3 倍的性能提升。
通過 WebNN 優化 Stable Diffusion、Whisper 等 AI 模型在 RTX GPU 上的性能。WebNN 是一個能夠幫助開發者使用設備端硬件加速網絡應用 AI 模型的 API。
隨著 Windows 將通過 DirectML 來支持 PyTorch,數以千計的 Hugging Face 模型將在 Windows 中原生運行。NVIDIA 與微軟正在合作,在 1 億多個 RTX AI GPU 上擴展性能。
與 NVIDIA 一起參加Microsoft Build 開發者大會
大會參加者可以體驗 NVIDIA NIM、NVIDIA cuOpt、NVIDIA Omniverse 和 NVIDIA RTX AI 平臺的現場演示。展臺還將重點展示適用于醫療影像工作流的 NVIDIA MONAI 平臺和適用于藥物研發的 NVIDIA BioNeMo 生成式 AI 平臺。這兩個平臺均作為 Azure 上 NVIDIA AI Enterprise 的一部分提供。
審核編輯:劉清
-
NVIDIA
+關注
關注
14文章
4986瀏覽量
103047 -
ai技術
+關注
關注
1文章
1275瀏覽量
24324 -
Microsoft
+關注
關注
0文章
214瀏覽量
6859 -
大模型
+關注
關注
2文章
2448瀏覽量
2701
原文標題:NVIDIA 與微軟擴展合作,幫助開發者更快構建和部署 AI 應用
文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達企業解決方案】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論