導讀
NVIDIA GTC 2023 線上大會將于3月20日至23日舉行。據 NVIDIA(英偉達)官方消息,NVIDIA 創始人兼 CEO 黃仁勛將于北京時間3月21日23:00,在 GTC 2023 上發表關于生成式 AI 、元宇宙、大型語言模型、云計算等領域最新進展的主題演講。
圖 | NVIDIA
黃仁勛表示:“ AI 正迎來有史以來最輝煌的時刻。新的 AI 技術和迅速蔓延的應用正在改變科學和各行各業,并為成千上萬的新公司開辟新的疆域。這將是我們迄今為止最重要的一次 GTC 。”此次大會也被 NVIDIA 定義為“ AI 和元宇宙時代的技術大會”。
NVIDIA 到底是一家什么公司?做顯卡的?做 GPU 的?都不對,在你所熟知的每一波科技浪潮中,都有 NVIDIA 的身影。無論是數字孿生、人工智能,還是自動駕駛……就連爆火的 ChatGPT 的算力也是由 NVIDIA 提供。哪里需要芯片和算力,哪里就有 NVIDIA 。而以上這些,都是元宇宙的一部分。
自 GTC 2021大會上 CEO 黃仁勛為以虛擬形象亮相,被視為 NVIDIA 全面 all in 元宇宙的重要節點。眾多媒體報道中也紛紛提到,“ NVIDIA 正不遺余力地布局元宇宙”。這里就不得不提到 Omniverse ,用 NVIDIA 自己的話說:“ Omniverse is everywhere!可以看到 NVIDIA Omniverse 如何讓藝術家無界合作,見證模擬世界以訓練 AI ,同時探索學習構建數字孿生。我們正在用 NVIDIA Omniverse 實現這一切!”
NVIDIA 解決方案架構師曹徐偉向元宇宙媒體 MetaPost 介紹,Omniverse 是一個致力于連接和創造的開放平臺,也是 NVIDIA 構建的能讓更多人參與的創建元宇宙的 UGC 工具。
此外,NVIDIA 非常注重生態社區的發展,在提供服務的同時,將很多用戶發展成了合作伙伴。優質的合作伙伴可以幫助用戶更輕松、容易地使用 Omniverse ,并建立起 NVIDIA 與用戶之間溝通的橋梁。
上海信弘智能科技有限公司(ZENTEK)是 NVIDIA 核心合作伙伴之一,他們具有出眾的開發能力,不斷深耕 NVIDIA GPU , DPU 及各種軟件的用戶場景,基于 Omniverse 產品,在數字人、多人協同、虛擬場景搭建等方面深入的研究和豐富的經驗。 ZENTEK 致力于數據中心級計算加速解決方案,基于 GPU 產品提供人工智能、高性能計算、大數據領域數字化轉型提供專業服務。客戶遍布教科研、高科技、設計、互聯網、金融等行業,從咨詢規劃、測試選型、到部署實施并提供后續的運營維護。
ZENTEK 在接受元宇宙媒體 MetaPost 采訪時表示,相較現實世界,元宇宙的市場空間和產業機會有極大的潛力。未來,所有的設計師、創作者都有機會在虛擬世界中構建數字作品。未來元宇宙經濟規模有可能會比物理世界中的經濟規模大很多倍。不管是不同的虛擬世界,還是虛擬世界和現實世界之間,至關重要的共同基礎都是如何呈現體驗、彼此連接。Omniverse 就是一個連接現實和虛擬世界的媒介,ZENTEK 也恰恰如此,是連接客戶和 NVIDIA 之間的一個媒介。
精華速覽
NVIDIA 構建的元宇宙應用程序平臺,不僅可以構建元宇宙,還可以用來操作元宇宙。
未來多數虛擬世界的用戶仍會使用電腦、手機、平板等進入虛擬世界。
NVIDIA 更多地是做底層的架構,服務更多的創作者,讓他們能在元宇宙中創造出他們想要的虛擬世界。
Omniverse 是一個致力于連接和創造的開放平臺,助力解決世界最艱難的工程和科學問題。
相較現實世界,元宇宙有更大的市場空間和產業機會,可以讓更多的設計師、創作者在虛擬世界中構建數字作品。
NVIDIA 正在構建能讓更多人參與的創建高保真虛擬世界的 UGC 工具。
所有與 AI 相關的領域都是 NVIDIA 重點關注的領域。
嘉賓簡介
圖 | 曹徐偉
NVIDIA 解決方案架構師 曹徐偉:致力于 AEC 行業的 Omniverse 推廣和技術解決工作,并借助強大的 AR 工具,以及高性能算力助推傳統設計工作流程的變革。加入 NVIDIA 之前,曾就職于現代設計、gad、Benoy 等知名建筑事務所,曾參與 Zaha 的虹橋 Soho 和 KPF 的超高層設計、閔行體育中心的紅館異形設計、環球影城的 BIM 正向設計,以及將要建成的 gad 杭州總部大樓設計。
圖 | 劉思蔚
ZENTEK 設計行業顧問 劉思蔚:曾就職于英國工程顧問公司 Buro Happold,曾主導上海國際新文創電競中心、深圳演藝中心等多個建筑項目方案階段的參數化設計和可視化課題研究。熱衷于構思創意和集成的解決方案,將前沿技術應用于設計領域,為行業帶來突破性創新的可能。
01、NVIDIA:元宇宙是一個龐大的 3D 數據庫
MetaPost:提到元宇宙,很難不想到 NVIDIA 。在今年 1 月的 CES 展上,NVIDIA 又發布了多項與元宇宙相關的產品更新。那么,NVIDIA 是怎樣理解元宇宙的?
曹徐偉:我們認為元宇宙是一個包羅萬象的概念,并且有可能是下一代互聯網的目標或最終形態。
九十年代第一代互聯網出現,大家通過 HTML 把所有元素鏈接起來,打開電腦撥號上網,并通過瀏覽器可以看到網頁的文字、圖片,后來慢慢地有了聲音、有了 Flash ,有了一點簡單的動畫,再后來有了視頻。每一種內容都是不同格式的文件,比如 TXT 是文字的,圖像是 GIF 或 JPG ,視頻是 AVI 等。不同的文件格式,要用不同的軟件才能打開。而 HTML 把上述所有元素集成到一個網頁上,這就是 Web1.0。
到了 Web2.0,就是移動互聯網,有了 Android 和 IOS 移動設備,手機就可以隨時隨地聯網,音、視頻通話、工作、游戲、刷視頻。
如今,我們認為第三代互聯網應該是 3D 的,可以將所有事物連接在一起,形成一個龐大的 3D 數據庫,這就是 NVIDIA 構建的元宇宙應用程序平臺——一個大型 3D 實時計算平臺,它不僅可以構建元宇宙,還可以用來操作元宇宙,它將所有 3D 設計師團隊實時連接起來,實時運行和模擬虛擬世界。
而元宇宙是一個寬泛的不同類型虛擬世界的合集。我們可以跨越現實世界的萬里之遙,在同一個空間里游戲、設計、工作和創造。虛擬世界涵蓋了娛樂、工業、設計等無數應用場景。當然,體驗元宇宙的終端設備不僅有手機,還有 AR 和 VR 等方式。當所有底層技術、設備和內容形成一個龐大的體系,我們可以在虛擬世界中有一個虛擬身份,交互體驗、社交娛樂甚至工作,這可能就是未來元宇宙的終極形態。
目前許多元宇宙案例都聚焦在擴展現實(包括 VR、AR、MR ),但這只是虛擬世界的體驗方式之一,絕非唯一。就像今天的多數玩家仍在用2D設備體驗 3D 的游戲世界,我們認為未來多數虛擬世界的用戶仍會使用電腦、手機、平板等進入虛擬世界。
02、NVIDIA 在元宇宙都有哪些布局?
MetaPost:很多媒體報道都提到,“ NVIDIA 在不遺余力地布局元宇宙”。到目前為止, NVIDIA 在元宇宙領域都有哪些布局?
曹徐偉:從軟件層面,我們有 Omniverse 作為主要的承接載體,配合皮克斯開源的 USD 通用場景描述格式,在 NVIDIA 的定制下,兼容更多的軟件與功能。從建筑、工業數字孿生,再到娛樂傳媒的內容制作,Omniverse 可以連接市面上絕大多數軟件格式,自動轉換,大大降低了各個軟件之間的格式壁壘。并在強大的 Nucleus 服務器支持下,實現多人實時協作。
硬件層面,Omniverse 可以借助強勁的 GPU 性能和光線追蹤技術,可以實現逼真的實時渲染效果和先進的 AI 性能。從視頻解碼、渲染速度,到高性能的計算都實現了質的飛躍。
我們還針對企業級用戶推出 NVIDIA OVX 專業服務器。數字孿生徹底改變了企業設計、測試和優化復雜系統及流程的方式,這需要多個自主系統在同一時空中進行交互。 NVIDIA OVX 為大規模工業數字孿生提供了技術支持,以實時創建和運行非常復雜的模型和逼真的仿真環境。
元宇宙最離不開 3D 資產的建立,我們有眾多工具插件,使客戶更容易便捷地獲得資產。NVIDIA 更多地是做底層的架構。我們不做內容,而是去服務更多的創作者,讓他們能在元宇宙中創造出他們想要的虛擬世界。
此外,我們還有很多的生態伙伴,包括我們很多的用戶也成為了我們很好的合作伙伴。他們有很強的開發能力,在 Omniverse 進行深耕,并且拓展了 Omniverse 的功能。比如 ZENTEK ,他們在 Omniverse 已經具有很強的功底,在數字人、協同,還有產品搭建等,都有豐富的經驗和案例。這樣優質的合作伙伴可以幫助我們的客戶客更輕松、容易地使用 Omniverse ,并建立起 NVIDIA 與客戶之間的橋梁。
03、Omniverse:一個致力于連接和創造的開放平臺
MetaPost:Omniverse 是一個怎樣的平臺?它解決了怎樣的行業痛點?Omniverse 可以連接元宇宙,那現在的布局中,已經實現了哪些技術或實踐的突破?
曹徐偉:Omniverse 是一個啟用多 GPU 的開放式云原生平臺,支持實時協作,不僅適用于企業,同樣適用于個人創作者,是一個致力于連接和創造的開放平臺。
Omniverse 作為虛擬場景的基礎架構,解決了多軟件數據傳遞的壁壘,將協同與實時修改發揮到了極致。
說到技術上的突破,不得不提 Omniverse 中的明星產品 Audio2Face 和 Audio2Gesture ,可以讓普通人輕松打造屬于自己的數字人和場景。
我們現在擁有技術來創造現實世界的全真數字孿生,這種新的技術革命將為現實世界帶來巨大變革,就像互聯網改變世界一樣,幾乎每個行業都將受益于自己運營一個虛擬世界,或者參與進一個虛擬世界。創作者們將為虛擬世界設計出比在現實世界更多的作品,企業將建立無數產品、環境、空間的數字孿生,小到日常生活,大到全球擬真。仿真將為所有企業帶來巨大的機會,因為在實際生產之前,幾千次的虛擬仿真生產將有效為生產過程降本增效。從這個角度來講,Omniverse 是一種專注于連接和建立現實精準的虛擬世界或數字孿生的技術工具,助力解決世界最艱難的工程和科學問題。
劉思蔚:從一個用戶的角度來看,在過去的嘗試中,Omniverse 就是一個加速設計協作的平臺。舉個例子,像建筑設計專業的一些內容,要給工程師進行傳遞,之后可能還涉及到建造階段,甚至在最后給客戶進行呈現,原來這是一個線性的關系,是一環扣一環的。過去每個項目可能需要花費一周的時間進行迭代,現在通過 Omniverse,就可以實時協作去解決。
Omniverse 解決的挑戰主要有三個方面:首先,現在有越來越多的跨團隊和跨地域協作,在這樣一種復雜的混合式工作流程當中,Omniverse 就在協同層面給大家了提供了很大幫助。其次,從軟件層面來講,各行各業的軟件,經常面臨一個導入導出的問題,各種格式非常繁雜,這個過程中經常會導致一些模型出錯。Omniverse 可以自動完成相關的轉換工作,很好地解決了這一問題。最后,未來對于算力的要求會越來越高,比如做一些物理仿真,要做實時光線追蹤,甚至要結合更多的AI工具,Omniverse 就在底層提供了非常好的基礎,來支持我們更好地創作和呈現。
而相較現實世界,元宇宙的市場空間和產業機會有極大的潛力。未來,所有的設計師、創作者都有機會在虛擬世界中構建數字作品。今天,大多數設計師還在設計物理世界中的汽車、建筑、服飾。在虛擬世界中,以上的設計都會豐富很多倍。未來元宇宙經濟規模有可能會比物理世界中的經濟規模大很多倍。
04、為什么說 USD 是元宇宙未來的基礎?
MetaPost:NVIDIA 曾多次公開表示,希望成為元宇宙領域的基礎設施供應商,而通用場景描述(USD)則是元宇宙未來的基礎。為什么說 USD 是元宇宙的基礎?
曹徐偉:我們的虛擬世界包含大量不同來源的信息和數據,因此在設計和編輯過程中將會產生大量信息數據的傳輸。為了能真正意義上實現現實世界的數據與虛擬世界的數據連接,并將這些工作流程很好地結合到一起,讓我們不得不提到 USD 也就是通用場景格式。
Web3.0 的數字世界,數據將不會是各自為政,就像現在互聯網的 Html 一樣,數據的格式一定會被打通。通用場景描述格式是以層的形式來組建場景和模型,讓每個設計師都可以在自己的那一層工作而互不干擾。對于模型本身,通用場景描述格式不僅包含了三維模型的結構,還有色彩、材質、燈光、物理屬性等等。在確保生態系統互用的前提下,把全保真資產導入其中,以非破壞性的工作流加速投產時間。
劉思蔚:元宇宙其實非常強調互聯互通,要把不同內容結合進來,用戶會希望有一個通用的格式。USD 提供了一個非常好的開源且開放的模式,允許大家去自定義做一些編輯。在這個過程中,Omniverse 可以自動完成格式轉化,既不改變現有的工作流程,又可以大大提高效率并降低成本。
05、Omniverse:創建虛擬世界的 UGC 工具
MetaPost:Omniverse 在 NVIDIA 的元宇宙布局中扮演著怎樣的角色?
曹徐偉:Omniverse 不僅是實時、物理級準確的世界模擬和 3D 設計協同工作平臺,更是各種 3D 資產的橋梁。同時讓創作者從單一線性的工作流解放出來,不僅提升工作效率,也降低了溝通成本。
對 Omniverse 虛擬世界來說,NVIDIA 專注于兩大問題:一是讓所有人都能很簡單地參與到構建高保真的虛擬世界中來;二是讓本地計算和云計算更有效率地把虛擬世界仿真度提高到現實世界的水平。通過高級計算、仿真模擬、機器視覺、人工智能,我們正在構建能讓更多人參與的創建高保真虛擬世界的 UGC 工具。
劉思蔚:不管是不同的虛擬世界,還是虛擬世界和現實世界之間,至關重要的共同基礎都是如何呈現體驗、彼此連接。
我們可以把 Omniverse 理解為一個連接現實和虛擬世界的媒介。過去我們可能需要花費大量的精力去完成一些元宇宙場景的搭建,但是現在用 Omniverse 這樣一個優化的加速計算平臺,結合一些 AI 工具,可以幫助創作者更好、更快地把創意呈現出來,也提供了更多的可能性。
ZENTEK 不僅僅是 NVIDIA 的核心合作伙伴,在深度使用 Omniverse 的過程中,我們也在不斷研發、拓展,開發出更多應用和場景,并提供完整的服務體系,包括培訓、定制化產品和解決方案等。所有的企業和創作者都是我們的客戶,我們的角色更像是客戶和 NVIDIA 之間的一個媒介和橋梁。
06、虛擬制片:手機拍攝+ AI 快速搭建起虛擬化場景
MetaPost:Omniverse 目前最主要的應用方向是什么?
曹徐偉:主要用于建筑工程、媒體娛樂以及工業與制造業。
Omniverse 除了可以驅動人物變形、口型變化,也加入了一些 AI 的功能,包括提問、手勢反饋等互動。比如無人咖啡點吧,你可以看到一個數字人,跟它說我要一杯什么咖啡,或者隨便問問天氣,數字人會為你下單制作咖啡,并回答你的問題,還會有逼真的表情。類似于 ChatGPT 用文字回答問題,但我們做出的是可視化虛擬人物或虛擬形象在跟你交流,更現實,互動感更強。簡單來說就是把人工智能和數字人結合在一起,應用到更多的產品和場景中。
另外就是虛擬制片行業,我們突破了以往的傳統制片,比如在數字拍攝時,要做一些三維的數字創建,用戶就可以通過手機,實時采集你需要的環境,變成數字化展現,后期再通過處理就能變成一個數字資產。這種技術讓數據采集變得更加容易,只需要圍繞一個環境拍攝一段視頻,通過AI就能快速搭建起整個虛擬化的場景。
07、數字工廠體現了Omniverse 強大的模擬仿真功能
MetaPost:Omniverse 在不同領域,還有哪些代表性的案例?
曹徐偉:我們此前和寶馬合作,制作了一個寶馬數字工廠,將整個寶馬工廠1:1地還原出來。寶馬數字工廠體現了 Omniverse 強大的模擬仿真功能,通過 AI 計算,將物料和機械設備進行擺放,基于人工智能自動運載的機械手臂、機器人,或者自動駕駛車輛有效地利用和組織。之后我們還會加入 IOT 的數據輸入,真正將現實工廠與 Omniverse 中虛擬工廠完全綁定在一起。
此外,我們還有與西門子合作的機械臂制造加工廠,與亞馬遜合作的智能倉庫等等。
近期,我們還正與英特爾聯手打造面向新一代創作者的全新工作站——元宇宙工作站。元宇宙工作站匯集了最高水平的人工智能計算、渲染和模擬性能,以應對數據科學、制造、廣播、媒體和娛樂、醫療保健等領域的苛刻工作負載。新的英特爾 Xeon W 處理器與全新的 NVIDIA GPU 相結合,將助力全球創作者、藝術家、工程師、設計師、數據科學家等,釋放更多創意和創造力。
08、Omniverse 和 Metaverse 異曲同工
MetaPost:Omniverse 在2019年提出,2020年上線,那時元宇宙概念還沒火,隨著元宇宙概念的爆發,Omniverse 的定位有變化嗎?目前的重點和下一階段的發展方向是怎樣的?
曹徐偉:其實 Omniverse 本身就是全宇宙、包羅萬象的意思,和 Metaverse 異曲同工。
目前我們主要關注如何推進元宇宙的基礎算力建設。NVIDIA 一直以來更多的是做基礎架構,比如在 Omniverse 之前,我們主要做顯卡的集成算力,現在 ChatGPT 背后的算力支持,就是用的我們 NVIDIA 的技術。
大家可以關注3月20日的 GTC 2023 大會,屆時會有更多與 AI 和 Omniverse 相關的內容發布。不過從今年1月的 CES 上其實可以看到,我們的產品已經有了更多 AI 的介入。
09、NVIDIA 會做 XR 頭顯嗎?
MetaPost:NVIDIA 提供了創造虛擬世界的技術支持,未來會做 XR 頭顯等終端設備來鏈接和呈現虛擬世界嗎?會做 To C 的元宇宙產品嗎?
曹徐偉:To C 的終端產品我們暫時不會做,不過我們還是會提供一些技術支持,比如 VR 、AR 的串流技術。如果直接把所有的素材搬到 VR 場景里,數據量非常大,是沒辦法實現的。通過串流,就可以很容易地在 VR 世界里看到一個很龐大的虛擬場景。
目前已經支持利用 VR 設備接入到 Omniverse ,在虛擬世界中實現沉浸式的交互體驗,結合不同的數字工具幫助我們實現作品的創新。同時還有 CloudXR 技術來實現高效的面向擴展現實的串流。
模擬高保真虛擬世界是一個頗具挑戰性的問題,而幾乎所有游戲引擎僅限于運行在一臺計算機上。如果要模擬更大更保真的世界,需要更多的算力讓它更快生成。通過云計算,我們可以將云數據中心的算力為我所用,從而投入更多的計算能力讓我們的虛擬世界更大、更復雜、更豐富。
NVIDIA 的主要關注點還是在 GPU ,會圍繞不同的應用場景做更多的基礎建設,引入更多的參與者加入其中,與合作伙伴一同營造社區生態。
10、NVIDIA 關注所有與 AI 相關的領域
MetaPost:NVIDIA 此前已經跟奔馳、寶馬等多個汽車品牌合作,近期又宣布與富士康合作,共同開發自動駕駛和自動駕駛汽車平臺。AI 和自動駕駛會是 NVIDIA 接下來的重點布局嗎?
曹徐偉:所有與 AI 相關的領域都是我們重點關注的領域,不僅僅在自動駕駛上,也包括數字人以及模擬仿真等等。
NVIDIA CEO 黃仁勛曾講過:其實 AI 更多是作為助手輔助人類工作,有了像 ChatGPT 這樣的工具,人人都可以是編程師,只要把你想要的內容描述給 ChatGPT ,它就能反饋給你一段代碼,這段代碼就可以很容易地在各種程序端呈現出你想要的內容。
其實我們想做的 AI ,就是讓所有人更輕松容易地去使用產品,最終呈現出用戶想要的內容。NVIDIA 的布局理念跟 Omniverse 產品相似,我們還是做一個平臺,也為自動駕駛提供技術支持。現在國內的造車新勢力有幾家品牌都用到了我們的芯片等硬件和模塊化內容。
技術本質上還是工具,無論是過去的技術還是未來的技術,其實都只是我們用來呈現創意和設計的方式。如何利用好這些工具改變我們創建虛擬世界的方式,讓各種活動結合設計實現無限的互動和體驗,是值得我們不斷思考的問題。
更多關于 AI 的精彩內容,請大家關注 3月20日的 GTC 2023 大會。
*聲明:本文為MetaPost原創,如需轉載請聯系我們。未經允許嚴禁轉載,文章版權及最終解釋權歸MetaPost所有。
來源:MetaPost微信公眾號