物聯網智庫 整理發布

轉載請注明來源和出處

導  讀

8月12日晚間,英偉達針對“虛擬黃仁勛召開發布會,‘騙過’觀眾”的說法做出了澄清。該公司在一份更新的博客文章中表示:“當然,主題演講離不開一個有血有肉的人站在舞臺中央,全部1小時48分鐘的發布會上,虛擬黃仁勛只出現了14秒(從1:02:41到1:02:55),其他時間都是黃仁勛本人召開的發布會�！�

在近期召開的計算機圖形頂級會議ACM SIGGRAPH 2021 上,英偉達介紹了自研的3D仿真模擬和協作平臺Omniverse,并放出了“合成版老黃”的打造過程。有媒體據此報道稱——萬萬沒想到,在3個月前的GTC大會中,廚房櫥柜、老黃經典皮衣、不時搖動雙手的老黃本人……竟然都是假的!

老黃騙了全世界!諸如此類的消息在極短的時間內引發了科技圈的轟動,很多人甚至在 Youtube、嗶哩嗶哩等平臺反復回放今年4月GTC老黃的Keynote視頻,企圖分辨“真假黃仁勛”。

然而,就在全網熱議不斷的檔口,英偉達在其官方博客中確認,4月發布會中,黃仁勛的Omniverse數字人僅出現過一次,就在發布會約62分鐘處,持續時間約14秒。根據這個信息,發布會中其他消失的老黃、廚房等片段,應該是其他CG電腦動畫特效,不屬于數字人技術。

盡管并非完全“造假”,但老黃無疑又火了一把。不僅如此,英偉達旗下的全球首個為元宇宙建立提供基礎的模擬和協作平臺Omniverse也再次將元宇宙這一概念推到風口浪尖。

真假黃仁勛?

8月12日晚間,英偉達針對“虛擬黃仁勛召開發布會,‘騙過’觀眾”的說法做出了澄清。該公司在一份更新的博客文章中表示:“當然,主題演講離不開一個有血有肉的人站在舞臺中央,全部1小時48分鐘的發布會上,虛擬黃仁勛只出現了14秒(從1:02:41到1:02:55),其他時間都是黃仁勛本人召開的發布會�！�

即使只有14秒,虛擬黃仁勛的難度也不可謂不高。

要想將老黃完美數字化,首先需要大量樣本,做到細節豐富。為了達到這一目的,首先就需要數以千計的各種角度的照片,并通過3D掃描獲取他身體的每一個特征——包括臉上的每一道褶子。

為了效果更為逼真,掃描過程還將對“標志性”皮衣單獨拍照,并在3D建模過程中做非常精細的調整,從而方便后期編輯。在文字轉換為音頻的過程中,通過Audio2Face即能實現語音內容自動生成,只需導入純音頻即可實現模型自動講話。

不過,僅僅只靠模型依然太假。這時候就要利用Face-Vid2Vid。通過一張老黃的照片,即可將其自動匹配合成至視頻當中,達到“以假亂真”。

OK,臉的問題解決了,可是身體怎么辦呢?這就需要專業的動作捕捉演員來代勞,畢竟老黃身為CEO,時間可是非常寶貴。

為了盡可能的采集老黃的身體動作,英偉達總共錄制了8小時的視頻,期間這位演員需要一邊閱讀以前的Keynote,一邊模仿老黃的動作和表情。

在這些前期工作做完后,渲染仍然是接下來的重頭戲,這就離不開英偉達自研的Omniverse RTX渲染器,真正意義上做到實時光線追蹤、移動視角,即使調整光線也能立刻完成更新。當然,這一技術背后離不開英偉達顯卡的支持,也需要GPU+云計算才能搞定。

據介紹,這場虛擬發布會總共有34個3D美術師和15個軟件研究人員參與,英偉達為此做出了21版數字老黃,最終選擇了其中最為相似的一個。而英偉達之所以大費周折的做出這樣一位數字老黃,正是為了推廣背后用到的3D仿真模擬和協作平臺Omniverse。

Omniverse:英偉達“元宇宙”的關鍵

基于對計算機圖形學(CG)技術的持續投入與探索,英偉達自主研發的CG技術已經太多太多。于是乎,英偉達選擇將其整合成為一個平臺——Omniverse。

具體看來,Omniverse可提供包括從CG到優化技術、從工具包到引擎等各種技術,涵蓋從渲染、材質,到光影、照明(光追、路徑追蹤等)各種應用,其所承載的CG技術的體量可能遠遠不止本次發布會中用于“造假”。

據介紹,Omniverse已經被廣泛應用于缺損像素修補、插幀,可對老照片和古早視頻進行修復。不僅如此,Omniverse還能基于GAN生成超分辨率圖像、直接把2D照片渲染成3D場景……

在豐富多彩的功能之外,“永遠實時在線”是Omniverse的核心亮點,其是指能讓設計師、藝術家和審核人員在任何地方通過領先的軟件應用在同一個共享的虛擬世界進行實時合作,跨平臺實現物理渲染、模擬和仿真。

正是基于平臺具備的強大功能,不只是人像修復與仿真,Omniverse已經能夠在工廠數字化中發揮重要作用。

例如,通過識別車輛、自主機器、機器人等,Omniverse能夠幫助工廠進行設計,其還能在虛擬環境中加入機器人和AI,并在訓練完成后直接部署在真實環境中。事實上,這些技術已經在寶馬的數字工廠中得到落地,將工廠效率提升了30%。

不止是寶馬工廠,Omniverse平臺還能夠應用于機器人仿真、自駕車仿真在內的一系列技術研發。例如,自動駕駛和工廠的AI檢測可能存在行人誤判,一旦AI將街頭公告張貼的人臉圖片識別為行人,就可能導致事故的發生。而如果能夠將逼真的數字人與渲染等技術相結合,就能在仿真環境訓練下模擬行人,讓AI學會判斷圖片和真人的區別。

如今,借助海量技術工具,Omniverse已經得到廣泛支持。自去年12月發布公測版以來,已經有超過5萬名個人創作者下載了Omniverse。

為了提供更好的技術支持,Omniverse還計劃將通過與Blender和Adobe集成來實現大規模擴展,并將向數百萬新用戶開放。據悉,Blender是全球領先的開源3D動畫工具,現在該工具將加入通用場景描述(USD)支持,使藝術家能夠訪問Omniverse制作流程。同時,Adobe正與英偉達合作開發為Omniverse提供Substance Material支持的Substance 3D插件,為用戶提供全新素材編輯功能。

而在不斷加碼的背后,英偉達之所以對Omniverse投入如此巨大的心血,其實還有一層更深的遠望——元宇宙。

事實上,隨著元宇宙概念逐步成為焦點,英偉達是少有的大力投入的企業之一。英偉達Omniverse開發平臺副總裁Richard Kerris曾表示:“英偉達Omniverse通過實現元宇宙這一愿景來連接各個世界。”由此可見,Omniverse平臺是英偉達實現元宇宙的基礎技術和平臺產品。

那么,元宇宙究竟是什么?

如何理解元宇宙?

根據各種研究機構、分析師和投資人對它的解讀,元宇宙不僅是基于物理實體在虛擬世界中1:1重建的一個“數字孿生體”,還包括由我們的想象力創造的各種虛擬事物。

元宇宙擁有完整的經濟邏輯,數據、物體、內容以及IP都可以在元宇宙中存在,而且元宇宙不僅包含虛擬和現實的萬事萬物,還包含他們之間的各種關系和連接。任何個人和企業都可以參與建設元宇宙,使之不斷完善和更加繁榮。

通俗來講,元宇宙創造了一個始終在線的、不斷被刷新的實時數字世界,里面擁有無限量的人、物、事。參與其中,人們不僅可以自由生活,還可以自由創造。元宇宙的核心在于永續性、實時性、多終端、經濟功能、可連接性和可創造性。數字孿生、混合現實、物聯網、5G等技術都是我們建設元宇宙的手段和工具。

由此可見,元宇宙將是包含許多獨立工具、平臺和基礎設施,由標準和協議支撐的物理世界和虛擬世界不斷融合的結果,其將真正構建出現實世界與虛擬世界的交融,并在方方面面改變世界。

不只是英偉達,微軟也早在此前就已經開始進行元宇宙的應用。在與全球最大啤酒企業之一的百威英博合作中,微軟就與其共同構建了“元宇宙”,其中融合了物理世界和數字世界中的多種元素,創造了一系列的變革性解決方案。

在工廠的實際操作中,百威英博就通過疊加數字孿生、機器學習、混合現實、低代碼、精準定位等各種技術,通過想象力交織創造出了一副創意畫布,最終實現生產瓶頸突破、產品生命周期跟蹤、員工實時定位及減少碳排放等功能,在零售端做到個性化產品的點擊率提升近100%、訂單轉化率提高67%。

此外,Facebook創始人兼首席執行官馬克·扎克伯格在2021年6月底表示,該公司的未來規劃遠不止是社交媒體,而是筑造一個元宇宙。扎克伯克宣稱,希望在未來用5年左右的時間,將Facebook打造為一家元宇宙公司。

2021年7月29日,Facebook發布2021財年第二季度審計財報。在財報會議中,有分析師問到關于Facebook對元宇宙的投資以及相關愿景,Facebook高管給出了相應回答。Facebook表示,接下來將以每年50億美元左右的規模持續投入元宇宙的開發與建設。

寫在最后

包括英偉達、微軟、Facebook在內的全球科技引領者都不約而同的劍指元宇宙,無疑都表明元宇宙的未來著實可期。由于很難界定元宇宙的邊界,也很難將其量化,保守估計元宇宙的規模也在兆億美元以上。

當然,盡管未來可期,但元宇宙目前仍處于發展的極早期階段。此次,英偉達傾心打造的14秒“假老黃”,無疑也將成為元宇宙發展的行業標志性事件和高光時刻,并有可能成為類似Alpha Go戰勝人類圍棋冠軍那般意義深遠。

沒有任何一家獨立的公司可以擁有元宇宙,反而是元宇宙可能孕育多家獨角獸企業。如果2021是元宇宙走進現實的元年,那么老黃此次或也將青史留名。

參考資料:

1．《只有14秒,假老黃才是假的!黃仁勛沒有騙了全世界,英偉達「元宇宙」驗明正身》,新智元

2．《黃仁勛騙過了全世界,三個多月都沒人發覺!皮衣是假的廚房是假的,連他自己都是假的》, 量子位

3．《英偉達自曝發布會“造假”!老黃竟是AI數字人,揭秘元宇宙黑科技》,智東西

4．《「假黃仁勛」刷屏之后,英偉達官方辟謠:只有14秒是虛擬的》,機器之心

5．《從互聯網,到物聯網,再到元宇宙,兆億量級的終極夢想走進現實【物女心經】》,物聯網智庫,彭昭