為元宇宙提供更多工具:NVIDIA 在SIGGRAPH大會上發布眾多功能與技術更新
- 2022 年 8 月 11 日
- AI
在圖形學高峰會SIGGRAPH 2022期間,NVIDIA (NVIDIA)針對元宇宙領域發布了一系列產品功能與技術更新:
NVIDIA發布Omniverse重要版本,新增USD連接器和工具、模擬技術以及開發者框架
全新NVIDIA Omniverse Avatar Cloud Engine助力虛擬助手和數字人通過圖靈測試
NVIDIA與合作夥伴擴展通用場景描述,加速工業元宇宙的發展和下一波人工智慧浪潮
再度升級元宇宙平台Omnniverse,
NVIDIA在SIGGRAPH期間宣布為基於通用場景描述(USD)連接和構建元宇宙世界的平台——NVIDIA Omniverse™提供一系列新的開發者框架、工具、應用和插件。
新發布的工具和功能包括: Omniverse Avatar Cloud Engine;DeepSearch AI 3D搜索引擎;用於稀疏體積數據的NeuralVDB AI升級;與用於科學數字孿生的NVIDIA Modulus的連接;以及PhysX、MDL等技術的更新。

此次針對Omniverse的擴展包括多項AI工具和功能,它們讓藝術家、開發者和工程師能夠比以往更加輕鬆地構建虛擬世界和內容,並且更加無縫地連接當今領先的3D應用,包括PTC Creo、SideFX Houdini、Unity以及來自西門子Xcelerator平台的解決方案。
Omniverse是一個用於構建虛擬世界的多GPU可擴展計算平台,已被全球約700家領先的公司用於改進建築和產品設計、簡化視覺效果工作流程以及構建工廠、城市和地球的數字孿生。
NVIDIA Omniverse和模擬模擬技術副總裁Rev Lebaredian表示:「元宇宙蘊含的商機價值數萬億美元,任何企業機構都不願錯過它,但許多企業機構找不到加入它的明確途徑。NVIDIA Omniverse縮小了物理世界和虛擬世界之間的差距,這些新的工具、技術和合作項目讓我們在今天就可以邁入3D互聯網。」
平台更新包括:
Omniverse Kit:用於構建本地Omniverse擴展和應用程式的工具包:
Omniverse中PhysX®的主要更新,包括實時、多GPU、可擴展的柔體和顆粒布料模擬,幫助提高虛擬世界和物體的物理準確性。
全新OmniLive Workflows:對Omniverse中基於USD的協作進行全面改造,為多個應用程式的3D工作流程帶來更高的速度和性能並實現非破壞性的USD工作流程,使藝術家和開發者之間的協作比以往更容易。
Omniverse Audio2Face :直接通過音頻文件創建面部動畫的AI工具,其推理和生成逼真情緒的新功能為AI動畫帶來了巨大的飛躍,可用於製作所有面部特徵動畫。
Omniverse Machinima :用於輕鬆構建3D電影和動畫電影的應用,發布了數百個來自遊戲《戰爭附言(Post Scriptum)》、《跨越火線(Beyond The Wire)》和《影子武士3(Shadow Warrior 3)》的全新免費3D資產,以及Audio2Gesture(可以利用音頻文件生成逼真手臂和身體運動的AI)等一套全新AI動畫工具。
Omniverse DeepSearch:現已面向Omniverse Enterprise客戶開放。DeepSearch使用自然語言幫助團隊利用AI直觀、準確地在龐大的、未標記的3D視覺資產資料庫中進行搜索。對於因擁有數十萬未標記資產而使搜索成為一大難題的遊戲開發商或視覺特效工作室而言,DeepSearch將帶來巨大的改變。著名的工業光魔(Industrial Light & Magic)工作室正在使用DeepSearch挖掘其不斷增長的數十萬環境資產庫。
另外,物理機器學習框架NVIDIA Modulus現已可用為Omniverse擴展程式。經Modulus訓練的物理機器學習模型可提供近實時的性能,根據不同的應用,其速度可提高4000甚至100000倍,並且具有前所未有、更接近高保真模擬的準確性。Modulus是NVIDIA Earth-2等科學數字孿生的基石之一。
NVIDIA還發布了多項核心模擬模擬技術的重大更新。這些技術在元宇宙世界中用於表示材質、物理和光線。
NVIDIA MDL:10年來,該材質標準一直支援物理級精確的3D材質表現,現已完全開源,使開發者能夠為任何渲染器帶來材質定義語言支援。
即將發布公測版的NeuralVDB是OpenVDB的下一個升級版本。它為稀疏體積的數據集帶來了AI和GPU優化,並將這些海量數據集的記憶體佔用率降低了多達100倍。
助力虛擬助手和數字人
NVIDIA發布了NVIDIA Omniverse Avatar Cloud Engine(ACE) ,為遊戲、聊天機器人、數字孿生和虛擬世界的開發者提供用於構建和部署互動式虛擬形象的雲原生AI模型和服務,讓用戶更輕鬆地構建和自定義栩栩如生的虛擬助手和數字人。

通過將這些模型和服務遷移到雲端,ACE使任何規模的企業都能夠立即獲得創建並部署助手和虛擬形象所需的大規模算力。這些助手和虛擬形象能夠理解多種語言、響應語音提示、與環境互動並提供智慧建議。
NVIDIA Omniverse和模擬模擬技術副總裁Rev Lebaredian表示:「幾十年來,我們所在的行業一直在教電腦如何輕鬆地交流和執行對人類來說十分輕鬆的複雜任務。NVIDIA ACE讓這一切變得觸手可及。ACE結合了許多複雜的AI技術,使開發者創造出將能夠通過圖靈測試的數字助手。
ACE建立在NVIDIA的統一計算框架基礎之上。該框架為用戶提供豐富的軟體工具和API,使他們能夠使用各種用於創建高度逼真的全互動式虛擬形象的技能。這些工具包括用於開發語音AI應用的NVIDIA Riva、用於電腦視覺和智慧影片分析的NVIDIA Metropolis、用於高性能推薦系統的NVIDIA Merlin™、用於自然語言理解的大型語言模型NVIDIA NeMo Megatron以及用於AI賦能動畫的NVIDIA Omniverse。
ACE所支援的助手和虛擬形象將改變遊戲、娛樂、銀行、交通和酒店等領域的互動方式。
NVIDIA的Project Maxine和Project Tokkio是建立在ACE上的兩個應用。Project Maxine為虛擬協作和內容創建應用帶來了最先進的影片和音頻功能。Project Tokkio賦予互動式虛擬形象以視覺、感知和智慧對話能力,並使虛擬形象能夠提供建議,以提高餐廳等場所的客戶服務水平。
Omniverse ACE大幅降低了數字人開發門檻,可以幫助用戶快速開發與部署虛擬形象,這將為數字人領域帶來顛覆性的變革,在短時間內創造大量可用的數字人將不再是想像。
Reallusion創新開發部主管Elvis Huang表示:「Reallusion的開發者可以快速、輕鬆地構建出令人信服的角色,藉助AI和實時渲染領域的最新進展,我們又向前邁進了一步。Character Creator和iClone工具在與NVIDIA Omniverse ACE組合後將能夠創造出栩栩如生、可以與終端用戶進行真實互動的虛擬形象。」
TIRIAS Research首席分析師Kevin Krewell表示:「各行業對數字人和虛擬助手的需求正在飛速增長,但創建和擴展它們卻變得越來越複雜。NVIDIA Omniverse ACE 彙集了所有位於AI雲端的微服務,讓用戶可以更加輕鬆地創建並大規模提供栩栩如生的互動式虛擬形象。」
NVIDIA宣布了一項發展通用場景描述(USD)的大型計劃,準備將該3D世界的開源和可擴展語言發展成為開放元宇宙和3D互聯網的基礎。在與皮克斯、Adobe、Autodesk、西門子以及媒體、遊戲、機器人、工業自動化和零售業等領域創新者的合作下,加速工業元宇宙的發展和下一波人工智慧浪潮。

NVIDIA將與USD的發明者皮克斯以及Adobe、Autodesk、西門子等多家行業內領先的企業合作,實施一項多年發展路線圖,將USD的功能擴展到視覺效果應用之外,使其能夠更好地支援建築、工程、製造業、科學計算、機器人、工業數字孿生等領域的工業元宇宙應用。
在SIGGRAPH上的特別演講中,NVIDIA公布了即將到來的推動USD發展的更新,包括:讓所有國家和語言的用戶都能參與USD的國際字元支援、實現城市規模和行星規模數字孿生的地理空間坐標支援以及實現數字孿生與物理世界同步發展的物聯網數據實時流式傳輸。
為了加速USD的開發和採用,NVIDIA還宣布開發一個開放的USD兼容性測試和認證套件,開發者可以自由使用該套件來測試他們使用USD構建的項目並驗證結果是否符合預期。
NVIDIA Omniverse和模擬模擬技術副總裁Rev Lebaredian表示:「除了媒體和娛樂行業,USD還將助力3D藝術家、設計師、開發者等人員,在構建虛擬世界時能夠在不同的工作流程和應用中進行協作。我們正在與合作夥伴社區一起投資發展USD,使其成為建築、製造業、機器人、工程等領域的基礎。」
NVIDIA正在發布一系列免費資源來加速USD的採用範圍,其中包括數千種專門用於幫助不具備3D專業知識的用戶構建開放虛擬世界的USD資產。NVIDIA還提供數百個可按需選擇的教程、文檔和開發者工具來幫助普及USD教育。
皮克斯動畫工作室首席技術官Steve May表示:「USD是皮克斯動畫製作流程的基石。作為一個開源框架,它在視覺特效和動畫方面,以及工業、設計和科學應用方面都呈現出快速增長的勢頭。NVIDIA將幫助USD發展成為完全可互操作3D平台的開放基礎,造福所有行業。」
NVIDIA還宣布投資構建能夠將流行的3D軟體生態系統連接到NVIDIA Omniverse™(一個用於連接和創建基於通用場景描述的虛擬世界的平台)的USD插件。新發布的公測版有PTC Creo和SideFX Houdini,此外,為Autodesk Alias和Autodesk Civil3D、Siemens Xcelerator等打造的插件正在開發中。
西門子數字工業首席技術官Dirk Didascalou表示:「西門子和NVIDIA正在攜手實現未來的設計、工程和協作空間——工業元宇宙。我們十分高興能在西門子Xcelerator平台上支援USD,並計劃與NVIDIA合作開發下一代USD格式。」
NVIDIA還在SIGGRAPH上彙集了USD生態系統中的數百名工程和產品負責人,並組成工作委員會,幫助NVIDIA調整USD開發的優先事項並獲取關於重點開發方向的回饋。目前,Adobe、Autodesk、皮克斯和西門子等眾多公司都在為USD的發展提供幫助和支援。
Autodesk執行副總裁兼首席技術官Raji Arasu表示:「USD是在動畫和視覺效果工作流程中實現3D數據交換標準化的一種方式,所以Autodesk從一開始就密切參與了USD的開發工作。我們很早以前就了解了3D互操作性的重要性,並且已經開始將USD的應用從媒體和娛樂行業擴展到設計、工程和工業應用。我們十分高興看到NVIDIA等合作夥伴支援USD的勢頭並且相信這將有助於更好地實現元宇宙概念及其為客戶帶來的全新工作流程。」
媒體、遊戲、機器人、工業自動化、零售和百貨行業的創新者已經開始將USD作為他們首選的元宇宙語言,其中包括Volvo汽車和Kroger。
Volvo汽車高級可視化專家 Mattias Wikenmalm 表示:「USD有著巨大的發展前景。Volvo在第一時間了解到開放、可擴展、可互操作的3D場景描述對我們元宇宙項目的價值。通過保持統一的資產來源並實現它們在不同虛擬世界之間的交換,Volvo將打造出真正無縫的 3D互聯網消費者應用。」
雷峰網

