NVIDIA與Microsoft在美國西雅圖舉行的Ignite 2023大會共同宣布多項資訊,包括於Azure引入NC H100 v5虛擬機系列,並在明年引入H200,以加速高要求的人工智慧工作負載。
NVIDIA與Microsoft在美國西雅圖舉行的Ignite 2023大會共同宣布多項資訊,包括於Azure引入NC H100 v5虛擬機系列,並在明年引入H200,以加速高要求的人工智慧工作負載。
業界首款H100 NVL GPU雲端執行個體
Microsoft於Ignite 2023大會宣布於Azure雲端運算服務導入NC H100 v5虛擬機系列,它是業界款配備NVIDIA H100 NVL GPU的雲端執行個體,雖然其GPU採用PCIe介面,但透過NVLink讓2組GPU互連為單一運算單元,提供4PFLOPS的AI運算運算效能與容量高達188GB的HBM3記憶體,適合進行推論和主流訓練工作。
Microsoft也表示計劃於明年在Azure雲端運算服務導入搭載141GB HBM3e記憶體的H200 GPU,能在不增加延遲的前提下支援規模更大AI模型的推論,強化大型語言模型和生成式人工智慧模型的應用。
此外NVIDIA也宣布在Omniverse Cloud上新增虛擬工廠與自駕車模擬引擎,並託管於Azure以提供一站式服務,協助汽車製造商數位轉型。
在個人電腦方面,NVIDIA將持續推動RTX平台發展,並提供TensorRT-LLM軟體強化大型語言模型的效能與應用。
更多Microsoft Ignite 2023大會的資訊可以參考官方網站。
加入電腦王Facebook粉絲團