作為生成式AI、圖形顯示和元宇宙基礎設施領域的「狠角色」,全球AI晶片霸主NVIDIA接下來會放出哪些重量級「核彈」,已經預定了科技圈的焦點。
新合作、新升級、新產品助攻生成式AI模型高效開發和部署
在電腦圖形年會SIGGRAPH上,NVIDIA創始人兼CEO黃仁勳除了發表硬體產品外,黃仁勳也分享了3個關於最佳化生成式AI流程的新發表,這些將有助於加速行業採用基於大型語言模型的生成式AI:
一是NVIDIA和全球最大AI開源社區Hugging Face建立合作。
二是推出NVIDIA AI Workbench,將需要用於生成式AI工作的一切打包在一起,只用點選一下就能將這個項目移動到任何終端裝置或雲端。
三是推出NVIDIA AI Enterprise 4.0,把DGX Cloud中的所有功能放到NVIDIA AI Enterprise軟體中。
1、與Hugging Face合作:將數百萬開發人員連接到生成式AI超級運算
黃仁勳宣布,NVIDIA和Hugging Face建立合作夥伴關係,將為建構大型語言模型和其他高級AI應用程式的開發人員提供生成式AI超級運算。
開發人員可以造訪Hugging Face平台內的NVIDIA DGX Cloud AI超級運算,來訓練和調優先進的AI模型。他們將有一個非常簡單的介面來推進工作,無需擔心訓練的複雜性,因為這些都會由DGX Cloud處理。
DGX Cloud的每個實例有8個NVIDIA H100或A100 80GB Tensor Core GPU,每個節點的GPU記憶體總計640GB。DGX Cloud包含來自NVIDIA專家的支援,可以幫助客戶最佳化其模型並快速解決開發挑戰。
作為合作的一部分,Hugging Face將推出一項名為「訓練叢集即服務(Training Cluster as a Service)」,以簡化為企業建立新的和自訂生成式AI模型。該服務由NVIDIA DGX Cloud提供支援,將在未來幾個月內推出。
2、NVIDIA AI Workbench:在筆電上也能輕鬆啟動生成式AI項目
另一款新品NVIDIA AI Workbench,是一個統一、易用的工作空間,能讓開發人員隨處建構或運行自己的生成式AI模型。
開發者可以很方便地將所有必要的企業級模型、框架、SDK和庫從開放原始碼庫和NVIDIA AI平台打包到這個統一的開發者工作空間中,然後只需點選幾下滑鼠,就能將自己的AI項目從一個位置移動到另一個位置。
這樣就能在個人電腦、筆電或工作站上快速建立、測試和定製預訓練的生成式AI模型,並在需要時將其擴充到資料中心、公有雲或NVIDIA DGX Cloud。
舉個例子,你可以在NVIDIA AI Workbench頁面上匯入項目,比如匯入SDXL-dev文生圖模型,輸入「玩偶黃仁勳在太空」,結果因為模型似乎不認識玩偶老黃,生成的圖像跟老黃的形象完全不沾邊。
接著只用幾張玩具老黃的圖像,對SDXL文生圖模型進行微調,它就能生成還不錯的效果。
總的來說,AI Workbench為跨組織團隊建立基於AI的應用程式提供了簡化的途徑,透過在本地系統上運行的簡化的介面造訪,讓開發人員能使用自訂資料從主流的程式碼庫(如Hugging Face、GitHub和NVIDIA NGC)中定製模型,並能輕鬆跨多平台共享。
戴爾、惠普、Lambda、聯想、超微等AI基礎設施供應商正採用AI Workbench以增強其最新一代多GPU桌面工作站、高階行動工作站和虛擬工作站的能力。
NVIDIA AI enterprise 4.0:提供一系列生成式AI工具
最新版的企業軟體平台NVIDIA AI enterprise 4.0,可提供生產就緒型生成式AI工具,並提供了可靠的生產部署所需的安全性和API穩定性。
NVIDIA AI Enterprise 4.0新支援的軟體和工具有助於簡化生成式AI部署,其中一大亮點是引入用於建構、定製和部署大型語言模型的雲端原生框架NVIDIA NeMo。
其他工具還包括NVIDIA Triton管理服務(透過模型編排實現可擴充AI高效運行)、NVIDIA Base Command Manager Essentials叢集管理軟體(幫助企業在資料中心、多雲端和混合雲端環境中最大限度提高AI伺服器性能和利用率)等。
NVIDIA AI Enterprise軟體支援使用者跨雲端、資料中心和邊緣建構和運行支援NVIDIA AI的解決方案,經認證可在主流NVIDIA認證系統、NVIDIA DGX系統、所有主要雲端平台和新發表的NVIDIA RTX上運行工作站。
最新版本的企業軟體平台將內建到Google雲端、微軟Azure、Oracle雲端基礎設施等NVIDIA合作夥伴市場。
Ominverse升級:加持生成式AI能力,曬OpenUSD路線圖
在生成式AI加持下,建構工業元宇宙與數位孿生場景的開發更加方便高效、視覺效果更加逼真。
面向元宇宙領域,NVIDIA的主角當仁不讓是Omniverse平台,以及該平台的基礎——開源通用場景描述框架OpenUSD。生成式AI與Omniverse的結合也此次演講的重頭戲。
黃仁勳宣布,比亞迪和賓士合資的豪華電動汽車品牌騰勢(DENZA)已與行銷及通訊巨頭WPP合作,在NVIDIA Omniverse Cloud上建構和部署其下一代先進汽車組態器。
WPP透過USD或OpenUSD內建了來自電動汽車製造商首選的電腦輔助設計(CAD)工具的全保真設計資料,進而建構一個單一的、物理精確的、即時的騰勢N7汽車模型數位孿生體。
當想要新增一個功能時,無需任何手動返工,就能將該功能建構到騰勢汽車的數位孿生體中,並立即部署到所有行銷管道中。
USD提供了一個高性能的通用框架來描述、組合、模擬和協作3D項目和資料。NVIDIA堅信這是3DInternet的基礎。
「就像HTML點燃了2DInternet的重大運算革命一樣,OpenUSD將點燃3D寫作和工業數位化的時代。」黃仁勳說,「透過開發NVIDIA Omniverse和生成式AI,NVIDIA將全力支援OpenUSD的發展和採用。」
在SIGGRAPH大會上,黃仁勳展示了從2020年至2023年NVIDIA加速OpenUSD的發展路線圖。
NVIDIA正推出一個SIM Ready規範,將物理屬性應用於USD資產,以便機器人和自動駕駛汽車等AI代理可以完全在模擬世界中瞭解真實世界。
近期NVIDIA與皮克斯、Adobe、蘋果、Autodesk聯合成立了OpenUSD聯盟AOUSD,將為OpenUSD開發一個標準規範,以加速其在工具生態系統中的採用和軟體間的互操作性。
NVIDIA正透過NVIDIA Omniverse、新技術組合和雲API以及新的NVIDIA OpenUSD開發者計畫,推進OpenUSD框架的開發。
為了讓開發人員更無縫地實施和部署OpenUSD流水線和應用程式,NVIDIA將生成式AI和OpenUSD結合,推出一些Omniverse雲端API:
- ChatUSD:基於NVIDIA Nemo框架的一個大型語言模型副駕駛,可回答USD知識問題或生成Python-USD程式碼指令碼)。
- RunUSD:用於檢查上傳檔案與OpenUSD版本相容性,可生成即時的完全路徑跟蹤的互動式USD檔案渲染。
- DeepSearch:基於大型語言模型的語義3D搜尋服務,可透過文字或圖像輸入,對大量未標註資產的資料庫進行快速語義搜尋。
Omniverse雲API將使開發人員能夠輕鬆地即時造訪NVIDIA及其合作夥伴的最新生成式AI和OpenUSD技術。
NVIDIA Picasso便是其中之一。它是一個基於雲端的代工廠,用於建構自訂的生成式AI視覺模型。Picasso使開發人員能訓練文生圖、文生視訊、文字轉3D生成等模型。
Shutterstock正在使用NVIDIA Picasso(建構的代工廠)來開發生成式AI服務,以加速3D工作流程。Shutterstock宣布了這些新服務的首款產品360 HDRi。經Picasso訓練的模型可生成逼真的8K解析度360度高動態範圍成像(HDRi)環境地圖,進而大大加快3D場景的內容創作。
此外,Omniverse進行了一些重要的版本更新:
Omniverse RTX渲染器內建了DLSS 3技術和新的AI降噪器,AI降噪器可實現對大規模工業場景的即時4K路徑追蹤。
開發人員還可以建構基於OpenUSD的內容和體驗,並將其部署到擴充現實(XR)裝置上。新的XR開發工具使使用者能在基於Omniverse應用程式中本地建構空間運算選項,靈活體驗他們喜歡的3D項目和虛擬世界。
Omniverse USD Composer可支援3D使用者組裝大規模的、基於OpenUSD的場景。
提供生成式AI API的Omniverse Audio2Face,僅從音訊檔案就能建立逼真的面部動畫和手勢,現在包括多語言支援和一個新的女性基礎模型。
Omniverse Kit Extension Registry是一個用於造訪、共享和管理全方位擴充的中央儲存庫,讓開發人員能輕鬆地在他們的應用程式中打開和關閉功能,使建構自訂app變得更容易。
這些新的應用程式和體驗範本能讓開發人員以很少的程式碼開始使用OpenUSD和Omniverse。
此外,Adobe與NVIDIA擴大了在Adobe Substance 3D、生成式AI和OpenUSD計畫方面的合作,宣布將在Omniverse中將提供其創意生成式AI模型系列Adobe Firefly的API。
最新版本的Omniverse處於測試階段,很快就會發表到Omniverse Enterprise企業版。
NVIDIA All in 生成式AI
在本屆SIGGRAPH大會上,黃仁勳集中分享了NVIDIA最新的技術、研究、OpenUSD開發和AI內容建立解決方案,並用一系列對開發者及企業極具吸引力的軟硬體新品,再度驗證NVIDIA在新時代的自訂——NVIDIA是一家平台公司。
今年以來,NVIDIA GPU已成為支援生成式AI和大模型訓練的大算力AI晶片首選,亦當之無愧是推動生成式AI普及的核心功臣。受益於生成式AI熱潮的NVIDIA,也正積極地成為一個稱職的「生成式AI布道者」,近期一直盡心竭力地推廣生成式AI在各行各業應用的價值。
在推動高效地、經濟地、可擴充地運行生成式AI模型的道路上,NVIDIA所展示了許多軟硬體創新成果,無論是加速大型語言模型訓練和調優,還是簡化定製生成式AI模型的工作流程,抑或是持續提高圖形渲染及工業元宇宙基礎設施的性能和開發體驗,這些進展都令人印象深刻。
加入電腦王Facebook粉絲團