立足當(dāng)下,展望未來。2021年12月18日,2021網(wǎng)易未來大會迎來收官之戰(zhàn),國潮、靈感無界、和文化、元宇宙四大論壇壓軸登場,想象、智慧、靈感諸多元素,激烈碰撞。 元宇宙,被認(rèn)為是未來20年甚至更久遠(yuǎn)的下一代互聯(lián)網(wǎng),乃至人類的未來。那么,如何看待元宇宙?它將帶來哪些變革?元宇宙將何時到來?網(wǎng)易未來大會“元宇宙”論壇收官階段,英偉達(dá)中國區(qū)Omniverse負(fù)責(zé)人何展發(fā)表了主題演講《打開元宇宙大門的鑰匙》,并同中國信息通信研究院云計(jì)算與大數(shù)據(jù)研究所所長何寶宏、網(wǎng)易游戲營銷總經(jīng)理張海星展開了一場精彩的討論,討論由Web3Vision管理合伙人楊林苑特邀主持。
在圓桌對話環(huán)節(jié),當(dāng)被問到元宇宙“入口”的爆發(fā)在哪里?何展認(rèn)為應(yīng)該會來自具體現(xiàn)實(shí)中的應(yīng)用,也就是說我們在工作生活中的痛點(diǎn)和難點(diǎn)在哪里?
何展分享了一組數(shù)據(jù),經(jīng)過調(diào)研發(fā)現(xiàn),數(shù)字點(diǎn)餐機(jī)器人的市場前景非常大,未來有可能在這個領(lǐng)域會有率先突破去服務(wù)大家,這是從應(yīng)用角度看,這樣的市場就可能有很大的爆發(fā)。
還有一個數(shù)據(jù),何展說,“我們發(fā)現(xiàn)未來5到10年里,可能會有一億輛以上的智能汽車在馬路上跑。將來智能汽車可能和今天的智能手機(jī)一樣普及,所以這種車上是不是也可能有對話式的機(jī)器人存在?”
在圓桌對話的最后,何展補(bǔ)充道:“另外一個問題不可忽視,大家所討論的元宇宙不應(yīng)該,也不可以成為人類逃離現(xiàn)實(shí)世界的港灣”。
以下為何展演講及圓桌對話實(shí)錄:
謝謝網(wǎng)易公司的邀請,參加2021年的未來大會,我是來自英偉達(dá)中國的何展,今年負(fù)責(zé)Omniverse平臺。
今天跟大家分享的內(nèi)容和技術(shù)有關(guān),今年的標(biāo)題是文化、藝術(shù)和科技的交融,今天跟大家分享一下Omniverse如何帶給大家一個全新的體驗(yàn)。
給大家分享一下前幾天看到的項(xiàng)目,瑞士聯(lián)邦理工大學(xué)做的,10月12號出來的,利用了人類現(xiàn)有的天體物理數(shù)據(jù),4500顆系外行星和千萬個星系,數(shù)億個空間物體,讓大家看了一個實(shí)驗(yàn),宇宙是什么樣子,王堅(jiān)院士說了一句話“人類在探討天體物理,20年前就有了,直到今天,我們看到的宇宙或者星空的形象是不是真實(shí)的?”。
今天和大家分享三個部分,從技術(shù)開始走到應(yīng)用,再看到未來,看到全新的世界呈現(xiàn)給大家!
先看一下圖形可視化,大家很多都體驗(yàn)過網(wǎng)易游戲包括手機(jī)游戲,其實(shí)游戲的顯示都是和一個技術(shù)息息相關(guān),專業(yè)圖形可視化,在圖形可視化的研究歷史上,有很多算法學(xué)家,在這個過程中持續(xù)了幾十年,從68年的Appel先生提出前向光線追蹤,再到86年Kajiya先生提出的渲染方程,路徑追蹤的算法,再到2018年英偉達(dá)的黃仁勛先生發(fā)布的實(shí)時光線追蹤,大家都在朝這個方向努力。
分享一下我們的路線圖,我們認(rèn)為離真正達(dá)到大家能夠沉浸的真實(shí)世界里的渲染能力,現(xiàn)在的算力還差10個6次方倍,這是我們的路線圖,我們在19-2023年之間,下面的15年,可能在2035年前后才能真正實(shí)現(xiàn)有體驗(yàn)的路徑追蹤算法的算力。
大家很關(guān)注AI和深度學(xué)習(xí),過去幾年有數(shù)據(jù)、算法、算力的提升,爆發(fā)了AI的應(yīng)用,經(jīng)典的理論模型,訓(xùn)練和推理,柵格化的人像都是人工智能生成的,包括這個展示,用語音驅(qū)動人的模型,甚至第三幅里可以看到,我們數(shù)字人在里面自主的學(xué)習(xí)走路,包括左下方,從視頻實(shí)時抽取出三維模型,衣服材質(zhì)的渲染,以及用深度學(xué)習(xí)算法進(jìn)行的降噪技術(shù),有了圖形可視化和AI的技術(shù)之后,我們真正能夠有什么新的玩意出來?這是在2019年做的視頻,這是我的同事,他在用AI的Pose算法系統(tǒng)抓取身體動作,可以投射到上面,是聯(lián)動的。
我們用iPad設(shè)備,可以把實(shí)時的運(yùn)動傳遞到拍攝的地方,美國的國旗是黑顏色的,我們計(jì)算機(jī)調(diào)一下,可以看到光線的渲染,這給大家展示了實(shí)時渲染的技術(shù),未來我們的數(shù)字世界一定是有這樣的技術(shù)實(shí)現(xiàn)。
圖形化和AI執(zhí)行過程中,現(xiàn)場看一些體育比賽,可以看到實(shí)時的數(shù)據(jù),包括賽車,可以肯定每一幀鏡頭的畫面,和體育賽事直播合作,冬奧會我們準(zhǔn)備用算法,大家看到滑雪運(yùn)動員在滑雪時候的運(yùn)動路徑軌跡。
這是幾周前大家都可以免費(fèi)玩的,可以做到輸入一段文字,實(shí)時生成現(xiàn)實(shí)中能看到的一些圖畫,這都是計(jì)算機(jī)生成的。這是深度學(xué)習(xí)算法和圖形可視化連在一起生成的。
這是我們的創(chuàng)始人黃仁勛先生在今年4月份的演講中,這是他的數(shù)字分身,我們大量引入黃色的算法,像這樣級別的超寫實(shí)數(shù)字人,在好萊塢制作公司要上百人幾個月的時間做出來,我們引入這樣黃顏色的算法之后,讓這樣的過程縮短到幾周,成本降了很多,順便給網(wǎng)易打個廣告,第一個算法叫Audio2Face,兩年前網(wǎng)易的伏羲實(shí)驗(yàn)室基于它做了MuiseToDance系統(tǒng),輸入一段音樂,數(shù)據(jù)人在里面可以自己跳舞,非常棒的工具。
一個月之前,我們又把數(shù)字人升了一個級,我們請了三位不同行業(yè)的科學(xué)家,有哲學(xué)家,問了很多哲學(xué)問題,還有氣候?qū)W家,問了很多氣候相關(guān)的問題,還有天體物理學(xué)家,問了很多很難的天體物理的知識,大家可以關(guān)注一下,它停頓了半秒,他具備了聽懂這些科學(xué)家問題的能力,同時還具備了很多非常專業(yè)的知識,這是大量的人工智能訓(xùn)練,讓未來的數(shù)字人,或者未來的數(shù)字形象具備這樣的能力。
我們又推出一個服務(wù)真實(shí)生活中這樣場景的點(diǎn)餐機(jī)器人,它有兩只小眼睛,可以看到點(diǎn)餐顧客面部的表情,給他們推薦一些顧客喜好的食物搭配,這也是未來人工智能能夠賦予新應(yīng)用的能力。
我們推出了Omniverse數(shù)字虛擬分身平臺,我們過去很多年做的語音合成,對話式AI能力,感知能力、推薦能力,渲染動畫的能力,也是不久的將來可以使用,這個平臺讓大家很好的降低了大的成本和門檻,讓大家快速的制作人物、各種服務(wù)于現(xiàn)在生活應(yīng)用的載體。
回到第三個方向的技術(shù),物理模擬,我們最近做的一個項(xiàng)目,我們模擬了一個火焰燃燒,這是真實(shí)的數(shù)字化的過程,模擬加州的大火,火勢蔓延趨勢圖的模擬,融合了圖形學(xué)、AI,因?yàn)橛?xùn)練了當(dāng)?shù)氐臍夂驍?shù)據(jù),還有真實(shí)物理燃燒的數(shù)據(jù),PhysX物理學(xué)算法也是其中的一項(xiàng)技術(shù)。
第四,數(shù)字孿生地球級別的算力,一個月之前發(fā)布了量子計(jì)算的SDK,我們孿生了一個數(shù)字地球,代號叫earth2,這件事是我們創(chuàng)始人非常想做的,大家不知道2060年的時候氣候是什么樣的,我們用大量的數(shù)據(jù)預(yù)測推演氣溫升高之后會不會帶來龍卷風(fēng)颶風(fēng)的災(zāi)害,我們用了技術(shù)的底層平臺,比如RapidS大數(shù)據(jù)能力,Modulus數(shù)字孿生的能力、Omniverse仿真的能力,做了這樣的視頻。
這里面介紹了我們這樣一個數(shù)字孿生地球可以預(yù)測32公里之內(nèi)颶風(fēng)的趨勢,服務(wù)大家,躲避或者很好的防護(hù)自然災(zāi)害的能力。
我們認(rèn)為的Omniverse和未來服務(wù)于新的人類體驗(yàn)和巨大技術(shù)革命的平臺。
老外理解的的Meta和中國人理解的“元”不太一樣,中國記載的《周易》,他記錄“元”最早,元者,生物之始,天地之德,莫先于此,故于時為春,于人則為仁,則眾善之長也”,這是最早記錄元字的概念,我本人也讀了,雖然沒有讀懂,但是我摘錄了一段,我自己有一個理解,元宇宙之元應(yīng)該是強(qiáng)調(diào)客觀存在的天地與人的主觀和客觀意識的和諧共存所創(chuàng)造的世界,回應(yīng)一下很多人在砸這個牌子,大家認(rèn)為他是打游戲,讓人們沉浸在里面,我們未來應(yīng)該創(chuàng)造一個這樣的世界,這是我個人的見解,汲取了古人對這個元字的評價,分享給大家,我們認(rèn)為的元應(yīng)該更向善,更積極,更真善美。
分享了很多例子,給大家展示我們的數(shù)字孿生的作品,這是中國很年輕的小孩們做的《水果星球》,每幀畫面都是數(shù)字畫的,包括山竹果肉和柚子的顏色。
大家看到互聯(lián)網(wǎng),其實(shí)是2D,我們的真實(shí)世界和2D的互聯(lián)網(wǎng)交互就是通過HTM創(chuàng)建出來的,我們認(rèn)為未來世界是3D的,我們創(chuàng)建了這個平臺,有了AI和物理引擎的能力,通過眼鏡、腦機(jī)芯片接口的方式和這個世界進(jìn)行交互,有了不同的Omniverse數(shù)字化世界,大家可以看到,關(guān)注一下USD,未來我們形容他是一個數(shù)字沖動,可以傳遞不同的3D的海量模型,這張圖可以很直觀的展示出來我們認(rèn)為未來的數(shù)字世界遠(yuǎn)遠(yuǎn)大于我們真實(shí)的物理世界,我們回過來和大家分享一個這樣的圖片,我們現(xiàn)在做的三維的房間,在三維互聯(lián)網(wǎng)是什么狀態(tài),真實(shí)世界里用iPad是什么狀態(tài),在數(shù)字世界里有不同的分工,這是非常務(wù)實(shí)和大家的分析,還有數(shù)字孿生工廠,時間原因不再細(xì)說了。
最后和大家分享一下我自己的感受,我們應(yīng)該保持一顆對科技進(jìn)步的敬畏之心對新事物的好奇之心,對我們生活在這個時代的感恩之心,謝謝大家!
圓桌對話
主持人(楊林苑):大家認(rèn)為的元宇宙是什么啥?自己或者說所在的機(jī)構(gòu)跟元宇宙是什么樣的關(guān)系?
何展:我覺得元宇宙現(xiàn)在應(yīng)該是沒有特別明確的定論,它應(yīng)該是一個概念,甚至是一系列技術(shù)集合的子集,整個集合在一起,然后再爆發(fā)。我和大家討論一下為什么最近大家都在討論,其實(shí)有三個因素:
第一個因素,剛剛我提到的二維互聯(lián)網(wǎng)和我們現(xiàn)在很多平臺提供的內(nèi)容,大家的需求應(yīng)該有矛盾了,所以很多人急盼著有新的體驗(yàn)?zāi)艹鰜怼?/p>
第二個因素,疫情的原因促進(jìn)了增長和暴發(fā),這個需求。
第三個因素,恰巧是2021年剛剛何老師包括其他的嘉賓也分享了,各種的技術(shù)在這個時間點(diǎn)集中的爆發(fā),讓大家覺得這個是有無限的可能。
主持人(楊林苑):我們今年也看到這些大公司,所有的科技企業(yè)都在跑步進(jìn)場,為什么大廠會這么熱衷呢?
何展:我也回應(yīng)一下,其實(shí)英偉達(dá)不是今年才入局的,剛剛看到我們的產(chǎn)品叫Omniverse,我們已經(jīng)研發(fā)了5年了,跟大家一起更新一下這個時間點(diǎn)。
我們在2019年就提出這個Omniverse了,今年是被大家?guī)У竭@個局里,其實(shí)這部分的儲備,我再重新和大家明確和分享一下,就是我們自己大概已經(jīng)在AI、在專業(yè)圖形可視化、在XR、在算力的儲備上,包括我們物理學(xué)引擎的模擬上,我們都儲備了這方面的能力。其實(shí)我們把它整體的整合在我們的平臺上,然后讓大家去未來可能是去創(chuàng)建所謂的元宇宙,可能是去創(chuàng)建數(shù)字孿生的世界也好,可能是為了創(chuàng)建數(shù)字人也好,數(shù)字資產(chǎn)也好,能成為這樣一個很好的、很快速的一個工具,讓大家很快的能夠去實(shí)現(xiàn)。這是我們的初衷。
另外,我們還是積極地?fù)肀碌募夹g(shù)的變化,把這個世界在數(shù)字世界里孿生出來的這一些、反饋出來的邏輯和成果,來反饋給我們的現(xiàn)實(shí)世界中的實(shí)際應(yīng)用,服務(wù)于我們?nèi)祟惖囊恍┕ぷ?、生產(chǎn)、生活,所以這是我們的一個初衷。
主持人(楊林苑):元宇宙所謂的入口,是兵家必爭之地,您覺得這個橋會是什么形態(tài)?或者目前來看最有可能的機(jī)會?
何展:我們這邊應(yīng)該從兩個方面探討這個話題。
第一個方面,爆發(fā)應(yīng)該會來自具體我們現(xiàn)實(shí)中的應(yīng)用,或者說我們在工作生活中的痛點(diǎn)和難點(diǎn)在哪里,所以我舉兩個例子,在我們過去的一兩個月里,我們發(fā)布了工廠級別的數(shù)字孿生,比如說大家可以上網(wǎng)關(guān)注一下數(shù)字寶馬工廠的孿生,里面上TB的數(shù)據(jù)我們都可以實(shí)時的去展示和渲染出來,它的生產(chǎn)的效率提升了30%。
第二個例子,剛才我們分享到的我們點(diǎn)餐的機(jī)器人,我給大家分享一個數(shù)據(jù),我們做了調(diào)研之后,發(fā)現(xiàn)全球有2500萬個英文叫Store的店,所以我們認(rèn)為我們理論上看到這個市場前景會非常大,大家都可能會在數(shù)字化轉(zhuǎn)型的過程中,有可能會選取這樣的數(shù)字機(jī)器人,來去幫助大家服務(wù)大家。所以這個是從應(yīng)用角度來看,如果有這樣的市場就會有很大的爆發(fā)。
還有一個調(diào)研數(shù)據(jù),就是我們發(fā)現(xiàn)5-10年里,我們在路上跑著可能會有一億輛以上的智能汽車和我們今天的智能手機(jī)一樣普及,所以這個車上是不是也有這樣的對話式的機(jī)器人存在?這是從應(yīng)用角度和大家分享一下。
第二個方面,是技術(shù)角度,剛剛提到了進(jìn)入和出去,我們一直在說數(shù)字蟲洞,其實(shí)大家可以關(guān)注一下這個,未來一定有這樣的技術(shù)才能夠幫助大家。
給大家解釋一下什么叫數(shù)字蟲洞,蟲洞的概念大家都知道,可能打開需要很重的負(fù)物質(zhì),可能需要一個木星,地球300倍質(zhì)量的物質(zhì)放進(jìn)它都能打開。我們的USD就是這樣的一個技術(shù),就是你的數(shù)字的3D資產(chǎn)有多大,我們都可以通過這樣的技術(shù)來去傳遞,來去在不同世界里進(jìn)行交流。所以類似于這樣的技術(shù),一定會去幫助到大家。
所以這兩方面因素,可能會促進(jìn)這樣世界的到來,這樣應(yīng)用的爆發(fā)。
主持人(楊林苑):在下一個代際,就是元宇宙的浪潮當(dāng)中,大家覺得小的創(chuàng)業(yè)者和小公司這些人會有一些新的可能性的機(jī)會嗎?
何展:我覺得生態(tài)為王,我們發(fā)布了一個月,上了一個月的數(shù)據(jù),我們的平臺類似于底層的技術(shù)平臺,這個平臺全球發(fā)布沒多長時間已經(jīng)有七萬開發(fā)者,超過七百多家大客戶應(yīng)用,很多企業(yè)開始應(yīng)用,我們認(rèn)為未來生態(tài)才是帶動大家未來落地應(yīng)用最重要的推動力。
在今天的會議之前,我跟郎佳子彧聊,他問我數(shù)字世界和元宇宙有什么區(qū)別,我跟他暢想了一個場景,未來的用戶在那個里面可以捏面人,是有交互的,這就是不同,要有沉浸式的交互,讓大家感受到藝術(shù)創(chuàng)作的魅力每一個人都可能會創(chuàng)作出自己的作品,甚至他的作品可以在那個平臺上跟大家分享,這是生態(tài)為王的意義。
主持人(楊林苑):劉慈欣說元宇宙其實(shí)是一次人類文明的內(nèi)卷,元宇宙會把人類帶向滅亡,對這個觀點(diǎn),大家怎么看?
何展:兩天前有人問我這個問題,首先元宇宙是什么?沒有任何一個人能定義,沒有任何一個公司可以單獨(dú)把它做出來,永遠(yuǎn)要保持對科技進(jìn)步的敬畏,對新事物的好奇,我們都生活在這么美好的時代了,為什么不去感激、感恩?這是我的看法。
主持人(楊林苑):元宇宙到底還有多遠(yuǎn)?
何展:從技術(shù)角度,我對自己所處的行業(yè)有一個暢想,比如十幾年之后要達(dá)到路徑追蹤所需要的算力,我們在幾年后,可能有一些偉大的公司推出,我愿意戴著VR眼鏡,像我今天戴的眼鏡一樣輕便,很舒服,未來真的進(jìn)入一個零售店,著急趕飛機(jī)的時候找不到東西,它可以告訴我在哪個貨架上,這個在不遠(yuǎn)的將來可以實(shí)現(xiàn),大家可以暢想一下。
另外一個問題不可忽視,大家所討論的元宇宙不應(yīng)該,也不可以成為人類逃離現(xiàn)實(shí)世界的港灣。