英偉達林耀南：做VR正如談戀愛第一印象很重要

在2016中國(北京)VR/AR產(chǎn)業(yè)峰會上，樂視新技術(shù)研發(fā)副總裁李強首次對外公開了樂視VR生態(tài)布局。英偉達亞太GPU產(chǎn)品總監(jiān)林耀南發(fā)表了名為“一沙一世界一花一天堂 化虛擬為現(xiàn)實之術(shù)”的主題演講，解密圖形處理在VR時代的核心技術(shù)和解決方案。

他認(rèn)為，VR平臺的建立應(yīng)該將三個層級分開，即消費級，如VR游戲和娛樂PC，涉及到全景視頻的捕獲;專業(yè)級，如VR工作站和體驗館，涉及到全景視頻捕獲和流化;移動級，如移動VR頭戴設(shè)備，涉及到嵌入式視頻捕獲和流化。而在AR方面，圖形圖像非常豐富，而畫面與現(xiàn)實環(huán)境的融合對機器視覺提出的要求，決定了GPU性能必須持續(xù)發(fā)展。

以下為林耀南演講實錄：

我先問大家一個問題，交女朋友最重要的問題是什么?

回答：漂亮。

林耀南：漂亮是第一印象。

交女朋友最重要的事情第除了第一印象還有第一次約會。女孩交男朋友最重要是第一印象，第一次體驗很重要，第一次印象搞砸了，這個產(chǎn)業(yè)就不要玩了，因為工作關(guān)系我很早期接觸VR/AR的設(shè)計，開始玩它。

我可以看到很多很棒的設(shè)計，很棒的VR體驗，但有時候會遇到比較差的VR體驗，比較差的VR體驗怎么來?因為不夠快。到底要多快呢?VR體驗從頭到尾要20個minisecond，顯卡到擺頭只有9個mini秒，天下武功為快不破，所以快非常重要。

快之外還有一點就是知識，我們要講虛擬現(xiàn)實，虛擬現(xiàn)實不是講虛擬，重點在現(xiàn)實。所以怎么樣兼具那個快還要達到現(xiàn)實，這就是NVIDIA的專長。

今天聽到很多VR體驗全都是在這里頭，這都是用NVIDIA的特異功能，這是攀登聲母峰的DAMO，這是美國圖形開發(fā)者大會Mars2030的VR，這也是用NVIDIA的技術(shù)。

還有星際迷航的光劍也是NVIDIA，NVIDIA已經(jīng)用到游戲開發(fā)商以及硬件開發(fā)商這里。

這是五個特異功能，包括兩個部分，左邊是游戲開發(fā)者做的，右邊三個是頭盔開發(fā)者做的。

大家中午吃飯如果離開自己公司到外面吃飯回來最快要多少?有沒有一小時的?我看到有點頭，有沒有半小時?沒有人點頭。有。也有半小時。如果說今天我要是出去吃飯，再回來老板跟我講說，可不可以不要30分鐘，我們 最近很忙，會不會覺得老板很過分，會，真的很過分。世界上有兩種對，一個是道理對一個是老板對，VR世界里面眼睛告訴你，世界上最快的顯卡、設(shè)備、眼鏡，眼睛告訴你說，不行，我有點暈，是一樣的道理。

我們吃飯先把菜點好，把車打好到那邊吃，吃飯吃到一半，人只有兩只手變成四只手，多余兩只手剝橘子皮，這個特異功能做這些事，我盡量用非技術(shù)的方式來講，我用5分鐘說技術(shù)。

第一，MULTIRES SHADING，反扭曲，經(jīng)過反扭曲看到很漂亮世界，NVIDIA發(fā)現(xiàn)有一些貓膩。這個東西在你的眼鏡里面其實是沒有完全成像，只成像一半，大部分的地方都是黑的，這些都沒有成像，我為什么要畫那么大?我畫了150分最后顯示100分，太浪費。你看這一角，最后顯現(xiàn)出來七分之一不到。這就是浪費，所以NVIDIA的特異功能，切成9個部分，根據(jù)9個部分，中間形變最少采取100%的分辨率，剩下的開發(fā)商可以自己填，填完之后在沒有減少你視覺的差異底下，你填上以后還是100%，沒有一點浪費。

一個游戲被切成9個，同時跑9個游戲浪費時間，依序處理這9個在不同的時間點。NVIDIA在5年前，我們可以同時處理9個游戲完全不占用任何時間，一次過去。所以它是完全同步的。

我們就可以得到很好的補償，原來你在中間看到東西是比較好的，你在旁邊看到是比較差的，那我們都用最過的像素密度繪圖，現(xiàn)在不用了，在邊緣的地方下降，減少浪費。

既然可以做減少浪費就有更高端技術(shù)出來。我抓到了，你現(xiàn)在比原來只還要差，作弊，這并不是。我們在3D，你看著我就看不到后面，今天更厲害的3D電影比 《阿凡達》還舒適，中間清楚，旁邊再模糊一點。NVIDIA可以切成9個，讓你游戲增加50%的效能。

第一個記錄，目前最新記錄有人打算試試看，12個小時之內(nèi)沒有做任何事就增加50%的效能，以前記錄一個禮拜增加30%。

用了三天，把一個場景不小心增加100%的效能，50%的效能970當(dāng)作980來用，300美金變成650美金。

第二個功能，就是VR SLI，它需要用CPU，確保兩個眼睛看到同一點。

眼鏡開發(fā)商、頭盔開發(fā)商也會導(dǎo)入一些功能。大家有沒有知道SKII有一個東西叫Petria，Context由于Petria，做VR眼鏡，我畫這里頭跑到這邊，頭往右邊看到這張，頭往左邊也看到這張，頭就暈了。TMIEWARP，針對你要畫的地方畫一點，根據(jù)陀螺儀跑這邊抓這一張，這樣不會頭暈。但是這要用掉一個Context，你的顯卡不能畫下一張圖，一到90幀，沒來，重復(fù)貼第一幀，我們裝的兩倍Petria的SKII給你。Context要有優(yōu)先權(quán)，因為它馬上要顯示。

再來就是DIRECTMODE，什么樣眼鏡就要插顯卡，不要跟微軟講，微軟就不知道插的第二臺應(yīng)用進來，再此就不會有延伸桌面。

第五個功能，叫FRONT BUFFER，顯卡把游戲的畫面畫在后面。我們剛剛講，天下武功為快不破，頭盔知道怎么拿的情況下，顯卡直接把圖放到前面口袋，同時我一拿出來的瞬間，屏幕就像拿了，我們就分析下去拿，都不會打結(jié)，這會快很多，這是非常跳脫在盒子之外的思考，才能夠減少很多的浪費。

五個非常棒的SDK，它被用在不只是GeForce還有專業(yè)繪圖卡上面，還有Tegra。

VR的應(yīng)用會被用在各個部分，這個地方我想大家知道。

NVIDIA的技術(shù)幫助整個架構(gòu)技術(shù)系統(tǒng)，頭盔設(shè)備降低延時提高分辨率和刷新率，游戲引擎跟引擎做華麗的特效，高的幀速率，應(yīng)用開發(fā)還需要電腦視覺，還有深度學(xué)習(xí)。在直播這邊要用到運算。

AR，未來非常看好，我也很看好，在AR上面不只要豐富的圖形還有一個很重要的，AR疊在空間的人頭上，不管怎么跑不可以歪掉，要電腦視覺，這都是GPU必須發(fā)展的地方。NVIDIA的技術(shù)跟大家一起同在，你甩都甩不掉。

今天主題是一沙一世界，一花一天堂，告訴大家怎么樣化現(xiàn)實為虛擬之術(shù)，今天的國人講爆點，12小時增加50%的效能，做的是VR的特別版。4.1已經(jīng)發(fā)布了，我們在昨天晚上11點也把它做完了，有做RV開發(fā)，用引擎的就可以跟我聯(lián)絡(luò)，特異功能你也有，就是周星弛說的你想學(xué)，我教你。

第一，VR/AR從我的觀念，它是一個枯木逢春的產(chǎn)業(yè)，在座的前輩，王捷已經(jīng)做超久了，但是到一個時間點就爆發(fā)，這跟《阿凡達》是一樣的，《阿凡達》3D電影已經(jīng)存在，突然間大爆發(fā)，現(xiàn)在電影常常有3D眼鏡，VR一旦進去現(xiàn)在爆發(fā)就停不了，VR爆了之后就會爆AR，大家一起做，所以對我來講VR/AR就是枯木逢春。

第二點，VR/AR的生態(tài)系統(tǒng)，生態(tài)系統(tǒng)沒有憑空產(chǎn)生的，就像地球的演化，從原有的生態(tài)系長出來，VR/AR的生態(tài)系來自于GPU、圖形就已經(jīng)存在的生態(tài)系，各種游戲產(chǎn)業(yè)、設(shè)計產(chǎn)業(yè)各種國防等等的還有醫(yī)療產(chǎn)業(yè)，VR生態(tài)系建筑于GPU的生態(tài)系之上。

最后，VR，對我來講是RV，現(xiàn)實虛擬。