老黃說元宇宙叫 Omniverse 不叫 Meta，誰有意見

——

文｜洪雨晗

老黃家熟悉的廚房又出現(xiàn)了，不過這次英偉達(dá)沒有像 ' 虛擬數(shù)字人 ' 那次賣關(guān)子，在 11 月 9 日 GTC 大會（GPU Technology Conference）的主題演講開始不久廚房就開始逐漸虛化，對，人真了但廚房是假的！場景轉(zhuǎn)換為英偉達(dá)大樓。

這次的假廚房和上次的虛擬老黃用到的都是 Omniverse 技術(shù)

英偉達(dá)的每次 GTC 發(fā)布會總能給人帶來不少驚喜。在大會正式開始之前，英偉達(dá)股價在上周便開始應(yīng)聲而漲。有不少投資者認(rèn)為此次大會可能會凸顯英偉達(dá)在今年火爆的 ' 元宇宙 ' 主題下的機(jī)遇，應(yīng)為英偉達(dá)所擅長的 GPU 之于元宇宙，就相當(dāng)于鋰電池之于新能源車。雖然老黃在一個半小時多的主題演講里沒有太刻意去強(qiáng)調(diào)元宇宙的概念，但本次大會中，確實有不少新技術(shù)產(chǎn)品的背后都有元宇宙的影子。

先下結(jié)論，老黃的整個主題演講其實就想傳達(dá)一個核心觀念——英偉達(dá)在推進(jìn) AI 在各行各業(yè)發(fā)展的過程中扮演了關(guān)鍵角色。串起這個觀念的內(nèi)容自然是展示自家的核心技術(shù)，簡要來說，英偉達(dá)展示了自家產(chǎn)品在企業(yè)和數(shù)據(jù)中心 AI、對話式 AI 和自然語言處理領(lǐng)域的最新技術(shù)，以及邊緣 AI 的應(yīng)用，如機(jī)器人、醫(yī)療和自動駕駛汽車等。

用 Omniverse Avatar 來做老黃的 AI 化身

這次主題演講的重頭戲自然跟外界炒的沸沸揚(yáng)揚(yáng)元宇宙難脫關(guān)系。英偉達(dá)在本次 GTC 大會上發(fā)布了 NVIDIA Omniverse ——一個用于 3D 工作流程的虛擬世界模擬和協(xié)作平臺 。其實英偉達(dá)在去年 12 月就發(fā)布了 Omniverse 平臺的公開測試版，它可以讓創(chuàng)造者在物理精確模擬或 3D 渲染中進(jìn)行實時協(xié)作。

如今，Omniverse 平臺再次升級，新發(fā)布了 Omniverse Avatar 和 Omniverse Replicator。其中，Omniverse Avatar 是一個用于生成交互式 AI 化身的技術(shù)平臺。它集合了英偉達(dá)在語音 AI、計算機(jī)視覺、自然語言理解、推薦引擎和模擬技術(shù)方面積累的技術(shù)，為創(chuàng)建人工智能助手打開了大門，可以幫助處理數(shù)十億的日?？蛻舴?wù)互動。Omniverse Replicator 則是一種合成數(shù)據(jù)生成引擎，可以基于現(xiàn)有數(shù)據(jù)持續(xù)生成用于訓(xùn)練的合成數(shù)據(jù)。

Omniverse 的門戶是 USD（通用場景描述）黃仁勛認(rèn)為 Omniverse 的本質(zhì)是一個數(shù)字蟲洞。未來任何計算機(jī)都可以連接到 Omniverse，并將一個 Omniverse 世界連接到另一個世界，USD 之于 Omniverse 就像 HTML（一種標(biāo)記語言，可以將網(wǎng)絡(luò)上的文檔格式統(tǒng)一）基于網(wǎng)站。

黃仁勛對 Omniverse 頗有野心。老黃表示，人們經(jīng)常說 ' 互聯(lián)網(wǎng)改變了一切 '，在萬物互聯(lián)的當(dāng)下，互聯(lián)網(wǎng)本質(zhì)上是這個世界的數(shù)字化表達(dá)，這種數(shù)字化覆蓋了所有 2D 層面的信息，即文本、語音、圖像、視頻。如今，隨著技術(shù)的進(jìn)一步發(fā)展，3D 層面的信息也在不斷涌現(xiàn)。

在黃仁勛的設(shè)想當(dāng)中，未來會有很多的設(shè)計者、創(chuàng)造者在虛擬現(xiàn)實、Metaverse 中設(shè)計數(shù)字事物，然后才在現(xiàn)實世界中去完成設(shè)計，包括汽車、包、鞋子等等產(chǎn)品。而此次發(fā)布的 Omniverse 平臺，正是擁有著創(chuàng)建全新 3D 世界或為物理世界建模的技術(shù)。

用一句互聯(lián)網(wǎng)黑話表示，就是所有現(xiàn)實世界中物理存在或不存在的東西，都值得在 Omniverse 上再做一遍?？蛇@么看來，Omniverse 不就和游戲引擎一樣了嘛，但老黃說了 Omniverse 是面向數(shù)據(jù)中心的規(guī)模來設(shè)計的，在未來或可能達(dá)到全球數(shù)據(jù)規(guī)模，也就是說英偉達(dá)的預(yù)期是未來的 Omniverse 能真的為物理世界建模。

當(dāng)然，讓 Omniverse 中的虛擬物品與物理世界中的人進(jìn)行實時交互仍存在諸多挑戰(zhàn)。黃仁勛表示：' 如何使用 Omniverse 模擬倉庫、工廠、物理和生物系統(tǒng)、5G 邊緣、機(jī)器人、自動駕駛汽車，甚至是虛擬形象的數(shù)字孿生，是一個永恒的主題。'

接下來黃仁勛展示了 Omniverse Avatar 結(jié)合英偉達(dá)各項技術(shù)后生產(chǎn)出來的實時應(yīng)用程序。首先是用于客戶支持的 Project Tokkio，'Tokkio' 是一款智能操作臺應(yīng)用程序，在視頻案例中 'Tokkio' 在一家快餐店服務(wù)，與兩位顧客直接對話并幫助顧客進(jìn)行了點餐服務(wù)。

基于 Omniverse Avatar 制作的智能操作臺應(yīng)用程序 Tokkio

如果將 Omniverse Avatar 與 Drive Concierge 相結(jié)合，可愛的自定義行車虛擬助手便出現(xiàn)了。

Omniverse Avatar 展示的另一個例子則是老黃自己的 AI 化身，英偉達(dá)的員工們早就開始用老黃的聲音構(gòu)建出了一個會對話的語音合成 AIToy-Me ——一個玩具 AI 老黃。不得不說，老黃確實懂得多，玩具版的 AI 老黃在視頻案例中輕松回答了氣候、天文、生物三個領(lǐng)域?qū)＜业膶I(yè)問題。

黃仁勛表示：' 你會看到這個虛擬形象是基于目前訓(xùn)練的最大語言模型的語言處理打造，包括聲音也是用我自己的語音進(jìn)行合成，還可以看到實時基于光線追蹤的精美圖像。'

實時對話 AI 機(jī)器人 'Toy Jensen Omniverse Avatar'

老黃還將 Omniverse Avatar 與視頻會議平臺 Maxine 相結(jié)合，為虛擬協(xié)作和內(nèi)容創(chuàng)建應(yīng)用添加了音視頻功能。在視頻案例中，一位女士在嘈雜的咖啡廳中可以視頻會議中簡單的去除背景噪音后通話，同時，她的英文可以被實時轉(zhuǎn)化為多種語言，并生成對應(yīng)口型及語調(diào)的虛擬形象。

一個看似簡單 AI 數(shù)字人其實并不簡單，Omniverse Avatar 能夠如此強(qiáng)大的原因在于其背后英偉達(dá)近年來的技術(shù)突破，老黃直稱在幾年前想要實現(xiàn)上述案例的功能幾乎不可能。如今，Omniverse Avatar 的推薦引擎采用 Merlin 方案，該框架允許企業(yè)能夠建立處理大量數(shù)據(jù)的深度學(xué)習(xí)推薦系；感知能力則來自計算機(jī)視覺框架 Metropolis；頭像動畫由 Video2Face 和 Audio2Face（二維和三維 AI 驅(qū)動的面部動畫和渲染技術(shù)）驅(qū)動。

自動駕駛的老司機(jī) Omniverse Replicator

黃仁勛在演講上發(fā)布的另一項產(chǎn)品 Omniverse Replicator，已產(chǎn)生了兩個用于生成合成數(shù)據(jù)的應(yīng)用—— NVIDIA DRIVE Sim?、NVIDIA Isaac Sim?。它們分別是用于承載自動駕駛汽車數(shù)字孿生的虛擬世界和用于可操縱機(jī)器人數(shù)字孿生的虛擬世界。

Omniverse Replicator 的優(yōu)勢在于它能在一定程度上代替真人來進(jìn)行昂貴、費力的數(shù)據(jù)標(biāo)記工作，同時這些虛擬世界中產(chǎn)生的數(shù)據(jù)可以涵蓋各類不同場景，包括在現(xiàn)實世界中無法經(jīng)常經(jīng)歷的場景以及極度危險的場景。它還能生成人類難以或無法標(biāo)記的真值數(shù)據(jù)，如速度、深度、被遮擋的物體、惡劣的天氣條件、追蹤各傳感器上的物體移動等。當(dāng)自動駕駛汽車和機(jī)器人在系列虛擬環(huán)境中得到充分訓(xùn)練后，才會逐漸應(yīng)用到現(xiàn)實世界當(dāng)中。

此外，黃仁勛還公布了 Omniverse 的另外四項功能。Showroom ——一個包含演示和示例應(yīng)用程序，展示了 Omniverse 核心技術(shù)；Farm ——一個系統(tǒng)層，用于協(xié)調(diào)跨多個系統(tǒng)、工作站、服務(wù)器和虛擬化批作業(yè)處理，可以用于批量渲染，AI 合成數(shù)據(jù)生成或分布式計算；Omniverse AR ——可以將將圖形串流到手機(jī)或者 AR 眼鏡；Omniverse VR ——首款全幀交互式光線追蹤 VR。

英偉達(dá)對 Omniverse 的期待遠(yuǎn)不止于此，英偉達(dá)還將利用 Omniverse 來構(gòu)建一個數(shù)字孿生模型來模擬和預(yù)測氣候變化。黃仁勛表示：' 預(yù)測氣候變化，以制定減緩和適應(yīng)策略，可以說是當(dāng)今社會面臨的最大挑戰(zhàn)之一。'

英偉達(dá)的上一臺超級計算機(jī)是 Cambridge-1，而如今用來模擬和預(yù)測氣候變化的這臺新的超級計算機(jī)將叫做 E-2（Earth Two），寓意為地球的數(shù)字孿生，它能夠在 Omniverse 中以數(shù)百萬倍的速度運(yùn)行 Modulus 創(chuàng)建的 AI 物理模型。

NVIDIA Cambrigde-1 中的 GPU

在主題演講最后，黃仁勛表示人類需要在為時已晚之前采取行動緩解和適應(yīng)當(dāng)今越來越頻繁的極端天氣，而 ' 我們目前發(fā)明的所有技術(shù)，均是實現(xiàn) Earth Two 所必不可少的，我想不出比這更宏偉、更重要的用途。'