NVIDIA於SIGGRAPH 2022大會上發表多款與神經網路圖像、Omniverse、數位人偶相關的開發軟體更新,提供更多方便的工具與標準,協助創作者將更多時間運用於內容產製。
Omniverse家族新成員
Omniverse是NVIDIA推出的3D開發平台,其最大的特色是可以透過通用的USD格式檔案,以及能夠串接Autodesk 3ds Max、Blender、Maxon Cinema 4D、Unreal Engine…..等多種3D開發軟體的連結器(Connector),大幅降低各軟體間協作的門檻,並期望將開源的USD推廣成為元宇宙世界的廣泛共通語言,如同HTML在網路世界般成為業界標準。
這次NVIDIA帶來許多Omniverse的更新,例如用於構建應用程式與擴展元件的Omniverse Kit工具包,其中PhysX物理引擎的重大更新支援即時、多GPU的軟性材質(Soft Body)、粒子布料模擬,有助於提高物理模擬的精確度,並可搭配Modulus深度學習模型,根據應用狀況不同將模擬速度提高4,000倍甚至100,000倍,同時提供前所未有的精度。
Omniverse Machinima應用程式可用於輕鬆製作3D電影和動畫,並在更新中增加《戰爭附言》(Post Scriptum)、《影武者3》(Shadow Warrior 3)和《Beyond the Wire》等遊戲的數百個免費3D素材,創作者也可以透過全新AI動畫工具中的Audio2Gesture,利用語音檔案產出逼真的手臂及身體動作。
Create XR則是世界上首款能夠支援即時光線追蹤的AR、VR平台。Audio2Face可以透過AI將語音檔案轉換為3D人物模型的面部表情動畫,並可微調多樣情緒參數,創造更逼真的表情特徵。
DeepSearch則是可以在3D資源數量越來越龐大的時候,透過直觀、準確地搜尋大量未標記的檔案。舉例來說開發人員可以輸入「紅色、生鏽的桶」做為關鍵字,快速從茫茫大海中找到相關的檔案。
▲Audio2Face的動態展示,該技術能讓3D人物模型的面部表情動畫隨語音變化。
數位人偶熱潮來襲
NVIDIA也預測數位人偶(Avatar)能在遊戲、娛樂、銀行、交通和餐旅等各種行業發揮所長,適合品牌形象或是顧客服務等等多種應用情境。
為了要加速企業導入,並協助各種規模的企業都能快速創建和部署數位人偶,NVIDIA宣布推出Omniverse Avatar Cloud Engine(雲端數位人偶引擎),提供所需的大量運算能量,並可支援多種語言、回應語音互動並做出智慧推薦,取得行銷方面的功效。
ACE建構於NVIDIA統一運算框架上,整合AI語音應用程序NVIDIA Riva、視覺分析Metropolis、推薦系統Merlin、大型自然語言模型NeMo Megatron、Omniverse等豐富的應用軟體、API,能在AI的協助下快速產生即時互動動畫。
在神經網路圖像部分,NVIDIA也發表了用於模擬和繪製水、火、煙、雲等稀疏物質的NeuralVDB函數庫,可以將低記憶體用量達100倍,改變視覺化、醫學成像、火箭科學和視覺特效等領導的工作方式。
而Kaolin Wisp則是針對開發人員設計、能夠協助神經網路研發的PyTorch函數庫,透過將原本需要花費數週的測試過程短到數天,以加速研究效率。
▲Project Tokkio是ACE的開發範例,透過能夠看到、感知、智慧地進行對話與提供建議的互動式數位人偶,強化餐廳等場所的顧客服務。
NVIDIA與創立USD格式檔案的Pixar,以及 Adobe、Autodesk、西門子與多家頂尖業者合作,制定了多年的發展路線圖,規劃將USD的功能發揮到視覺特效之外的領域,以便在建築、工程、製造、科學運算、機器人及工業數位孿生等領域中,提供工業元宇宙應用更佳的支援。
NVIDIA 在 SIGGRAPH 大會所發表的特別演講中分享即將推出的更新項目,以推動 USD的發展,包括支援國際字元,讓所有國家和使用不同語言的使用者都能運用 USD,支援地理空間座標以製作出城市規模和行星規模的數位孿生,以及支援即時串流物聯網資料,以便開發與實體環境同步的數位孿生。
為加速發展及採用 USD,NVIDIA也著手開發開放式USD相容性測試和認證套件 (USD Compatibility Testing and Certification Suite),開發者可以免費使用這個套件測試他們所建立的USD檔案,並驗證明能夠正常運作。
SIGGRAPH 2022大會現正進行中,有興趣的讀者可以參考官方網站以及NVIDIA的特設網站。
加入電腦王Facebook粉絲團