1910
日前召開(kāi)的SIGGRAPH 2022大會(huì)上，英偉達(dá)宣布了針對(duì)元宇宙的幾大重要進(jìn)展：發(fā)布Omniverse重要版本、推出用于構(gòu)建虛擬助手和數(shù)字人的云原生AI模型Omniverse Avatar Cloud Engine（ACE），并宣布了發(fā)展通用場(chǎng)景描述（USD）的大型計(jì)劃，準(zhǔn)備將該3D世界的開(kāi)源和可擴(kuò)展語(yǔ)言發(fā)展成為開(kāi)放元宇宙和3D互聯(lián)網(wǎng)的基礎(chǔ)。
放眼國(guó)內(nèi)外的元宇宙玩家，主要包括工具型公司、內(nèi)容型公司、UGC創(chuàng)作公司、云服務(wù)商等等。英偉達(dá)作為提供關(guān)鍵技術(shù)支撐的工具型、平臺(tái)型公司，算是最早在元宇宙領(lǐng)域推出具體工具支持和產(chǎn)品服務(wù)的企業(yè)之一，此次在SIGGRAPH上的發(fā)布，既有核心工具的重大更新、也有開(kāi)放合作的具體計(jì)劃，也將進(jìn)一步夯實(shí)英偉達(dá)在元宇宙領(lǐng)域的布局和地位。
NVIDIA Omniverse和仿真模擬技術(shù)副總裁Rev Lebaredian表示：“元宇宙蘊(yùn)含的商機(jī)價(jià)值數(shù)萬(wàn)億美元，任何企業(yè)機(jī)構(gòu)都不愿錯(cuò)過(guò)它，但許多企業(yè)機(jī)構(gòu)找不到加入它的明確途徑。NVIDIA Omniverse縮小了物理世界和虛擬世界之間的差距，這些新的工具、技術(shù)和合作項(xiàng)目讓我們?cè)诮裉炀涂梢赃~入3D互聯(lián)網(wǎng)。”
降低創(chuàng)建和部署逼真虛擬助手和數(shù)字人的門(mén)檻
一些行業(yè)應(yīng)用對(duì)數(shù)字人和虛擬助手的需求其實(shí)是在飛速增長(zhǎng)的，但創(chuàng)建和擴(kuò)展它們卻變得越來(lái)越復(fù)雜。為此，英偉達(dá)推出了全新的用于構(gòu)建和部署逼真虛擬助手和數(shù)字人的云原生AI模型和服務(wù)Omniverse Avatar Cloud Engine（ ACE），它將幫助游戲、聊天機(jī)器人、數(shù)字孿生和虛擬世界的開(kāi)發(fā)者提供用于構(gòu)建和部署交互式虛擬形象的云原生AI模型，值得一提的是，它已經(jīng)能夠助力虛擬助手和數(shù)字人通過(guò)圖靈測(cè)試。
對(duì)于NVIDIA ACE推出的重要意義，Rev Lebaredian表示：“幾十年來(lái)，我們所在的行業(yè)一直在教計(jì)算機(jī)如何輕松地交流和執(zhí)行對(duì)人類來(lái)說(shuō)十分輕松的復(fù)雜任務(wù)。NVIDIA ACE讓這一切變得觸手可及。ACE結(jié)合了許多復(fù)雜的AI技術(shù)，使開(kāi)發(fā)者創(chuàng)造出將能夠通過(guò)圖靈測(cè)試的數(shù)字助手。”
據(jù)介紹，ACE建立在NVIDIA的統(tǒng)一計(jì)算框架基礎(chǔ)之上。該框架為用戶提供豐富的軟件工具和API，使他們能夠使用各種用于創(chuàng)建高度逼真的全互動(dòng)式虛擬形象的技能。這些工具包括用于開(kāi)發(fā)語(yǔ)音AI應(yīng)用的NVIDIA Riva、用于計(jì)算機(jī)視覺(jué)和智能視頻分析的NVIDIA Metropolis、用于高性能推薦系統(tǒng)的NVIDIA Merlin、用于自然語(yǔ)言理解的大型語(yǔ)言模型NVIDIA NeMo Megatron，以及用于AI賦能動(dòng)畫(huà)的NVIDIA Omniverse。ACE所支持的助手和虛擬形象，有望改變游戲、娛樂(lè)、銀行、交通和酒店等領(lǐng)域的互動(dòng)方式。
英偉達(dá)的Project Maxine和Project Tokkio是建立在ACE上的兩個(gè)應(yīng)用。Project Maxine為虛擬協(xié)作和內(nèi)容創(chuàng)建應(yīng)用帶來(lái)了最先進(jìn)的視頻和音頻功能。Project Tokkio賦予交互式虛擬形象以視覺(jué)、感知和智能對(duì)話能力，并使虛擬形象能夠提供建議，以提高餐廳等場(chǎng)所的客戶服務(wù)水平。
據(jù)了解，一些從事虛擬助手和數(shù)字人的開(kāi)發(fā)者們，已經(jīng)在計(jì)劃使用ACE來(lái)加速其虛擬形象開(kāi)發(fā)工作。
Omniverse發(fā)布重要版本更新
Omniverse是一個(gè)用于構(gòu)建虛擬世界的多GPU可擴(kuò)展計(jì)算平臺(tái)，擁有高度逼真的物理模擬引擎以及高性能渲染能力。目前，已被全球約700家領(lǐng)先的公司用于改進(jìn)建筑和產(chǎn)品設(shè)計(jì)、簡(jiǎn)化視覺(jué)效果工作流程以及構(gòu)建工廠、城市和地球的數(shù)字孿生?？梢哉f(shuō)，它是英偉達(dá)打造元宇宙重要的組成部分，也是英偉達(dá)最重要的平臺(tái)之一，幾乎結(jié)合了英偉達(dá)有史以來(lái)的所有工作。
為了繼續(xù)擴(kuò)大Omniverse的應(yīng)用生態(tài)，幫助藝術(shù)家、開(kāi)發(fā)者和工程師更加輕松地構(gòu)建虛擬世界和內(nèi)容，并且更加無(wú)縫地連接當(dāng)今領(lǐng)先的3D應(yīng)用，Omniverse此次一舉發(fā)布了多項(xiàng)AI工具和功能創(chuàng)新。
最新發(fā)布的平臺(tái)更新主要包括：
首先，用于構(gòu)建本地Omniverse擴(kuò)展和應(yīng)用程序的工具包Omniverse Kit，主要包括兩方面進(jìn)展：一是PhysX的更新，包括實(shí)時(shí)、多GPU、可擴(kuò)展的柔體和顆粒布料仿真，能夠幫助提高虛擬世界和物體的物理準(zhǔn)確性。二是全新OmniLive Workflows：對(duì)Omniverse中基于USD的協(xié)作進(jìn)行全面改造，為多個(gè)應(yīng)用程序的3D工作流程帶來(lái)更高的速度和性能并實(shí)現(xiàn)非破壞性的USD工作流程，使藝術(shù)家和開(kāi)發(fā)者之間的協(xié)作比以往更容易。
其次，直接通過(guò)音頻文件創(chuàng)建面部動(dòng)畫(huà)的AI工具Omniverse Audio2Face，其推理和生成逼真情緒的新功能為AI動(dòng)畫(huà)帶來(lái)了巨大的飛躍，可用于制作所有面部特征動(dòng)畫(huà)。
第三，還有用于構(gòu)建3D電影和動(dòng)畫(huà)電影的應(yīng)用Omniverse Machinima，發(fā)布了數(shù)百個(gè)來(lái)自《戰(zhàn)爭(zhēng)附言（Post Scriptum）》等游戲的全新免費(fèi)3D資產(chǎn)，以及Audio2Gesture（可以利用音頻文件生成逼真手臂和身體運(yùn)動(dòng)的AI）等一套全新AI動(dòng)畫(huà)工具。
值得一提的是，Omniverse DeepSearch已面向Omniverse Enterprise客戶開(kāi)放。DeepSearch使用自然語(yǔ)言幫助團(tuán)隊(duì)利用AI直觀、準(zhǔn)確地在龐大的、未標(biāo)記的3D視覺(jué)資產(chǎn)數(shù)據(jù)庫(kù)中進(jìn)行搜索。對(duì)于因擁有數(shù)十萬(wàn)未標(biāo)記資產(chǎn)而使搜索成為一大難題的游戲開(kāi)發(fā)商或視覺(jué)特效工作室而言，DeepSearch將帶來(lái)巨大的改變。
另外，物理機(jī)器學(xué)習(xí)框架NVIDIA Modulus現(xiàn)已可用于為Omniverse擴(kuò)展程序。經(jīng)Modulus訓(xùn)練的物理機(jī)器學(xué)習(xí)模型可提供近實(shí)時(shí)的性能，根據(jù)不同的應(yīng)用，其速度可提高4000甚至100000倍，并且具有前所未有、更接近高保真模擬的準(zhǔn)確性。Modulus是NVIDIA Earth-2等科學(xué)數(shù)字孿生的基石之一。
除了上述全新應(yīng)用和框架，英偉達(dá)還發(fā)布了多項(xiàng)核心仿真模擬技術(shù)的重大更新，這些技術(shù)在元宇宙世界中用于表示材質(zhì)、物理和光線。其中，NVIDIA MDL支持物理級(jí)精確的3D材質(zhì)表現(xiàn)，現(xiàn)已完全開(kāi)源，使開(kāi)發(fā)者能夠?yàn)槿魏武秩酒鲙?lái)材質(zhì)定義語(yǔ)言支持；即將發(fā)布公測(cè)版的NeuralVDB是OpenVDB的下一個(gè)升級(jí)版本，它為稀疏體積數(shù)據(jù)集帶來(lái)了AI和GPU優(yōu)化，并將這些海量數(shù)據(jù)集的內(nèi)存占用率降低了多達(dá)100倍。
元宇宙的通用“語(yǔ)言”USD，繼續(xù)擴(kuò)大應(yīng)用生態(tài)
在使用Omniverse打造元宇宙時(shí)，最關(guān)鍵的是通用場(chǎng)景描述（USD）技術(shù)。開(kāi)源USD幾乎已是業(yè)界公認(rèn)的未來(lái)流程協(xié)作的數(shù)據(jù)格式，搭建起的流程適合團(tuán)隊(duì)協(xié)作。也就是說(shuō)，它可以作為一個(gè)開(kāi)放的API，支持復(fù)雜的場(chǎng)景貼圖，專門(mén)在各式各樣的場(chǎng)景、千差萬(wàn)別的應(yīng)用程序之間幫助互換數(shù)據(jù)資產(chǎn)。此外，它還能夠分層式管理數(shù)據(jù)資產(chǎn)，讓許多不同部門(mén)的大型團(tuán)隊(duì)在同一個(gè)場(chǎng)景工作并共享數(shù)據(jù)，進(jìn)行協(xié)同和分布式工作。
英偉達(dá)最新宣布的一項(xiàng)發(fā)展通用場(chǎng)景描述（USD）的大型計(jì)劃值得關(guān)注，這意味著這一3D世界的開(kāi)源和可擴(kuò)展語(yǔ)言將發(fā)展為開(kāi)放元宇宙和3D互聯(lián)網(wǎng)的基礎(chǔ)。
皮克斯動(dòng)畫(huà)工作室首席技術(shù)官Steve May表示：“USD是皮克斯動(dòng)畫(huà)制作流程的基石。作為一個(gè)開(kāi)源框架，它在視覺(jué)特效和動(dòng)畫(huà)方面，以及工業(yè)、設(shè)計(jì)和科學(xué)應(yīng)用方面都呈現(xiàn)出快速增長(zhǎng)的勢(shì)頭。NVIDIA將幫助USD發(fā)展成為完全可互操作3D平臺(tái)的開(kāi)放基礎(chǔ)，造福所有行業(yè)?！?/p>
Rev Lebaredian表示：“除了媒體和娛樂(lè)行業(yè)，USD還將助力3D藝術(shù)家、設(shè)計(jì)師、開(kāi)發(fā)者等人員，在構(gòu)建虛擬世界時(shí)能夠在不同的工作流程和應(yīng)用中進(jìn)行協(xié)作。我們正在與合作伙伴社區(qū)一起投資發(fā)展USD，使其成為建筑、制造業(yè)、機(jī)器人、工程等領(lǐng)域的基礎(chǔ)?！?/p>
據(jù)介紹，英偉達(dá)將與USD的發(fā)明者皮克斯以及Adobe、Autodesk、西門(mén)子等多家行業(yè)內(nèi)領(lǐng)先的企業(yè)合作，實(shí)施一項(xiàng)多年發(fā)展路線圖，將USD的功能擴(kuò)展到視覺(jué)效果應(yīng)用之外，使其能夠更好地支持建筑、工程、制造、科學(xué)計(jì)算、機(jī)器人、工業(yè)數(shù)字孿生等領(lǐng)域的工業(yè)元宇宙應(yīng)用。
未來(lái)，USD的更新還將包括：讓所有國(guó)家和語(yǔ)言的用戶都能參與USD的國(guó)際字符支持、實(shí)現(xiàn)城市規(guī)模和行星規(guī)模數(shù)字孿生的地理空間坐標(biāo)支持，以及實(shí)現(xiàn)數(shù)字孿生與物理世界同步發(fā)展的物聯(lián)網(wǎng)數(shù)據(jù)實(shí)時(shí)流式傳輸。
英偉達(dá)還與工業(yè)、設(shè)計(jì)、模擬和CAD軟件生態(tài)系統(tǒng)中的合作伙伴一同發(fā)布了11個(gè)新的Omniverse連接器（Connector），這些基于USD的插件進(jìn)一步向工業(yè)界和科學(xué)界的公司開(kāi)放Omniverse工作流程。目前，Omniverse USD生態(tài)系統(tǒng)中的連接器總數(shù)已達(dá)到112個(gè)。
在SIGGRAPH上，英偉達(dá)還匯集了USD生態(tài)系統(tǒng)中的數(shù)百名工程和產(chǎn)品負(fù)責(zé)人，組成工作委員會(huì)，調(diào)整USD開(kāi)發(fā)的優(yōu)先事項(xiàng)并獲取關(guān)于重點(diǎn)開(kāi)發(fā)方向的反饋。目前，Adobe、Autodesk、皮克斯和西門(mén)子等眾多公司都在為USD的發(fā)展提供幫助和支持。
隨著越來(lái)越多合作伙伴擴(kuò)展基于通用場(chǎng)景描述USD的應(yīng)用，它將有望形成元宇宙的一項(xiàng)行業(yè)標(biāo)準(zhǔn)，也將進(jìn)一步發(fā)展成為開(kāi)放元宇宙和3D互聯(lián)網(wǎng)的重要基礎(chǔ)。
下載ECAD模型
