NVIDIA 在 Microsoft Build 開發者大會上展示了與 Microsoft Azure 和 Windows PC 的集成解決方案,簡化了 AI 模型部署并優化了路徑規劃和應用性能。
如果說經過優化的 AI 工作流如同一個完美的交響樂團,從硬件基礎設施到軟件庫的每一個組成部分都恰到好處,那么 NVIDIA 與微軟長期以來的默契合作對于開發者來說便如同悅耳的音樂。
微軟開發的 Phi-3 系列小語言模型等最新 AI 模型經過優化后,可在 NVIDIA GPU 上運行,并以 NVIDIA NIM 推理微服務的形式提供。NVIDIA 開發的其他微服務,如 cuOpt 路徑優化 AI 等,正作為 NVIDIA AI Enterprise 軟件平臺的一部分被定期添加到 Microsoft Azure Marketplace 中。
除了這些 AI 技術之外,NVIDIA 和微軟還為開發者提供越來越多的優化和集成功能,幫助他們為搭載有 NVIDIA GeForce RTX 和 NVIDIA RTX GPU 的 PC 創建高性能 AI 應用。
基于在 NVIDIA GTC 上所公布的進展,兩家公司在今年于西雅圖舉行的年度開發者盛會 Microsoft Build 上進一步推進這一長期合作。
加速微軟的 Phi-3 模型
微軟正在擴展其 Phi-3 開源小語言模型系列,增加了小型(70 億參數)和中型(140 億參數)模型,類似于擁有 38 億個參數的 Phi-3 Mini。另外,微軟還推出了一個新的 42 億參數多模態模型 Phi-3-vision,支持圖像和文本。
所有這些模型均通過 NVIDIA TensorRT-LLM 實現了 GPU 優化,并以 NVIDIA NIM 的形式提供。NVIDIA NIM 是具有標準應用編程接口(API)的加速推理微服務,可以部署在任何位置。
您可在ai.nvidia.com上或通過 Azure Marketplace 上的 NVIDIA AI Enterprise,獲取由這些 NIM 支持的 Phi-3 模型的 API。
NVIDIA cuOpt
現已登陸 Azure Marketplace
NVIDIA cuOpt 是一項適用于路徑優化的 GPU 加速 AI 微服務,該服務現在通過 NVIDIA AI Enterprise 在 Azure Marketplace 上架。cuOpt 所采用的大規模并行算法能夠實現航運服務、鐵路系統、倉庫和工廠的實時物流管理。
該模型在主要的路徑基準測試中創造了二十多項世界紀錄,展現出最高的準確性和最快的速度。通過優化車輛路線、節省行路時間和減少空閑時間,它能夠為物流和供應鏈行業節省數十億美元。
通過 Azure Marketplace,開發人員可以輕松地將 cuOpt 微服務與 Azure 地圖集成,在企業級管理工具和安全性的支持下,支持實時物流管理和其他基于云的工作流。
使用 NVIDIA RTX 優化 PC 的 AI 性能
NVIDIA 加速計算平臺是現代 AI 的中堅力量,可幫助開發者為全球超過 1 億臺 Windows GeForce RTX PC 和 NVIDIA RTX 工作站構建解決方案。
NVIDIA 和微軟正在為 Windows 開發者打造能夠加速下一代 PC 和工作站應用 AI 性能的全新優化和集成,包括:
通過 NVIDIA DirectX 驅動、Generative AI ONNX Runtime 擴展和 DirectML 提高大語言模型(LLM)的推理性能。NVIDIA GeForce Game Ready、NVIDIA Studio 和 NVIDIA RTX Enterprise 驅動現已提供這些優化,在 NVIDIA GeForce RTX GPU 上提供至高可達 3 倍的性能提升。
通過 WebNN 優化 Stable Diffusion、Whisper 等 AI 模型在 RTX GPU 上的性能。WebNN 是一個能夠幫助開發者使用設備端硬件加速網絡應用 AI 模型的 API。
隨著 Windows 將通過 DirectML 來支持 PyTorch,數以千計的 Hugging Face 模型將在 Windows 中原生運行。NVIDIA 與微軟正在合作,在 1 億多個 RTX AI GPU 上擴展性能。
與 NVIDIA 一起參加Microsoft Build 開發者大會
大會參加者可以體驗 NVIDIA NIM、NVIDIA cuOpt、NVIDIA Omniverse 和 NVIDIA RTX AI 平臺的現場演示。展臺還將重點展示適用于醫療影像工作流的 NVIDIA MONAI 平臺和適用于藥物研發的 NVIDIA BioNeMo 生成式 AI 平臺。這兩個平臺均作為 Azure 上 NVIDIA AI Enterprise 的一部分提供。
審核編輯:劉清
-
NVIDIA
+關注
關注
14文章
5160瀏覽量
104884 -
ai技術
+關注
關注
1文章
1307瀏覽量
24755 -
Microsoft
+關注
關注
0文章
216瀏覽量
7025 -
大模型
+關注
關注
2文章
2845瀏覽量
3500
原文標題:NVIDIA 與微軟擴展合作,幫助開發者更快構建和部署 AI 應用
文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達企業解決方案】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
NVIDIA 推出開放推理 AI 模型系列,助力開發者和企業構建代理式 AI 平臺

極速部署!GpuGeek提供AI開發者的云端GPU最優解

涂鴉智能與火山引擎達成重磅合作,億元補貼全力構建AIoT開發者生態

微軟AI開發者挑戰賽即將開啟
NVIDIA與合作伙伴推出代理式AI Blueprint
云端AI開發者工具怎么用
香橙派與昇思MindSpore合作提速,軟硬結合助力開發者構建創新AI應用

Arm推出GitHub平臺AI工具,簡化開發者AI應用開發部署流程
印度頭部IT企業與NVIDIA合作加速AI采用
NVIDIA RTX AI套件簡化AI驅動的應用開發
揭秘NVIDIA AI Workbench 如何助力應用開發

NVIDIA將全球數百萬開發者轉變為生成式 AI 開發者
NVIDIA NIM 革命性地改變模型部署,將全球數百萬開發者轉變為生成式 AI 開發者

評論