以下內容根據英偉達全球副總裁兼中國區總經理張建中及青瞳視覺聯合創始人祖厚超在極客公園 2016 奇點·創新者峰會「What's next about VR 」閉門論壇上的演講整理而成。

　　英偉達：把下一代 GPU 的性能提升三倍

　　我覺得很多人都認為是 VR 是很新的技術，大家都認為 2015 年是 VR 的元年。其實我認為 VR 這個技術大家把它看的太新了，其實 VR 是一個很古老的技術，它從我們很多人沒有出生之前，60 年前，VR 就已經開始有人嘗試了。要一個大型的設備把人裝進去，感覺或者模擬，所以說 VR 本身不是一個新科技是一個古老的技術，但是在這個過程當中有許多的科研工作者花很多時間來讓 VR 技術進步。

　　事實上，每隔 10 年、20 年，VR 技術都有不同的變化。在這些變化當中，我們看到大概在 1968 年的時候就有人把 VR 戴在頭上移動了，跟現在我們形式上類似了。

　　大家認為 2015 年 VR 元年的時候，這個時候才開始有第一代的頭盔，大家體驗的時候覺得一下子很震撼，覺得 VR 科技有很大的飛躍。如果跟歷史比較一下，是什么原因導致 2015 年頭盔能夠給消費者帶來第一次震撼的效果，而不是像 60 年的 VR 只能在實驗室里面讓專家模擬，就是因為我們在 2015 年的時候發布了新的 GPU。

　　我們準備在下一代把它整體性能提升三倍。在不停的變化當中，VR 真正能夠進入消費、進入實用階段，GPU 的性能是要有很大很強的計算能力的提升，才能滿足我們用戶的需要。

　　10 年前我們可能還沒有 GPU，GPU 時間很短，這幾年發展很塊，帶來是整個計算能力的提升，我們今天最好的 VR 頭盔，你去看的時候，你發現很多 VR 的體驗都讓人不盡如人意，覺得分辨率不夠高。當我們每個人的手機有了視網膜屏之后，當你看到點再也看不出來之后，那個精度就能滿足我們用戶的需要。今天帶上頭盔你會發現每張圖片像素是很粗的，直到有一天像素很細之后，你的眼睛不用挑剔圖象質量的時候，那時候 VR 的品質就會跟今天很不一樣。

　　在 VR 世界中有很多應用，我們在開發的時候需要很多的現實模擬，你一定要有很好的方法去模擬真實的世界，要有工具幫助我們開發者開發出更好的內容。

　　每個人都知道，人跟機器的交互最簡單的還是靠人自己。你會看到很多用戶體驗方面一定會有很多公司研發更好更新的科技進行人機交互，我們今天看到很多合作伙伴在不同階段開發出很多有趣的設備，這些不同的設備在幾個月當中會迭代得非常快。我知道有很多公司開發的人機交互在多人互動的 VR 交互方面已經非常成熟了，其中最好的方法還是一個人機友好的交互方式。

　　沒有好的內容技術的應用是不會成熟的，內容驅動技術發展，技術發展也帶動了內容的進步，在 VR 系統當中內容的開發商才是核心的關鍵。VR 的引擎和內容是非常重要的。

　　這幾個點結合起來可以把整個 VR 行業從傳統帶向新的階段，就可以在整個內容方面有一個很大的提升，但是這些提升需要一個強大的 GPU 性能去驅動。去年的產品已經是世界最快的，但是只能達到 60 幀。我們放大成兩個左右眼睛渲染的時候，假設分辨率是 3000×1680，計算能力需要 450MP/S，基本上你要擴大 7 倍的渲染能力，你的 GPU 計算能力要有 7 倍，但是知道這個是非常困難的。

　　這是我們今年發布的產品，這也是在所有的網站跟銷售當中賣的最好的顯卡，GTX 1080，只有它才可以滿足 HTC Vive。提升的 7 倍的渲染力，我們在 1080 的顯卡上做到了。在整個 GPU 性能提升之外，我們在里面加了很多 VRWorks 套件的技術。在這個里面我們把它增加了一個新的渲染引擎，在 GPU 渲染的同時，不只是渲染眼睛看到的部分，它把你的左右方向全部渲染完了，當你的頭左右移動的時候就不需要再做一次工作了。如果 GPU 在渲染一個 360 度鏡像的時候一次性渲染完，你在頭盔移動的時候就不需要再計算了。這種方法可以把整個看到的面或者你的眼睛能看到的視角范圍內的畫面全部渲染完。這樣的方式在 GPU 能力不夠的時候，就可以達到很好的性能，你的頭左右移動的時候不需要再渲染一遍。

　　我們把眼睛看到的畫面折射成你的眼球的曲面，用這樣的方式把 GPU 的圖形圖象渲染能力提升 7 倍，這樣的好處可以讓所有的計算當中減少了很多計算量，你會看到 VR 的性能在 1080 顯卡當中比 GTX960 提升了 7 倍。可以讓 HTC Vive 達到 140 幀。

　　我們都知道在 VR 的世界當中不只是眼睛去看，所以我們要看到你的視覺、聽覺、觸覺等各個方面模擬出自然世界當中各種各樣的效果。我們利用人的五官，眼睛、耳朵、手、皮膚我們把這些感覺增加進去，專門做了一套 VRWorks 套件，實實在在模擬現實中的一切，物體跟物體之間的碰撞，物體跟物體之間的軌跡，都可以根據重力加速度模擬。

　　同時我們也做了非常好的一些開發工具，這些開發工具當中包括了很多物理模擬的 SDK，其中有 PHYSX，拆分成小顆粒做很多分子運動的模擬，也可以做很多流體的模擬，可以做很多細搭的建筑物，精細到每個細小的小塊，讓它產生實際的效果。可以看到很多戰爭的場面，破碎的物體。

　　怎么樣體現這個，我們為了讓很多開發者學會使用這些新的 SDK，我們做了一款游戲叫FUNHOUSE，建議每個人欣賞體驗一下 FUNHOUSE 帶來的效果，我們打算把源代碼開放在網上，讓所有的開發者自己下載。我們也打算跟國內的游戲開發社區，給大家提供相應的技術支持，教會每一個開發者有能力開發出更加逼真的自然的游戲效果。

　　這個效果到底怎么樣，我建議每個人找到設備去體驗，這個模型做的很簡單，簡單的物理特效模擬游樂場，所有的運動軌跡是一樣的，如果籃球可以產生重力加速度，反彈和碰撞產生的結果都是非常真實，氣球破碎之后粒子的狀況，如果游戲開發的好，可以開發的很細，如果開發的很細對于我們的 GPU 就會很麻煩，你會很快秒殺我們的 1080，有的人可能會買 4 塊，也是促進我們盡快研發下一代 GPU。其實很多人玩家覺得這個顯卡太慢，這也是 GPU 為什么這幾年加速發展的過程。

　　為了讓這些東西做的很好，AUDIO 是非常重要的一點，為了把這個做好，這個也是非常簡單就是聲音的折射和反射，對于 GPU 來說非常容易，因為在 GPU 有一個引擎專門做光線追蹤，如果有到聲音里面更加容易，聲音源沒有那么，反而光源會很多，我們把這個算法加進 VRWorks 套件里面。當然我們每個人都會迫切需要 Volta 盡快上市，好消息是它會很快，壞消息是還要等兩年。

　　今年如果我們是投資人你會發現投資的兩大科技點一個就是 AI，一個就是 VR，所有這一切就是基于 GPU，如果一個企業不懂 GPU 研發，你投資給它是有點浪費的，因為它很難找到技術源泉驅動他的應用。

　　總結一下 VR 里面，我相信 VR 當中對于我們整個生態系統來講，無論是做 HMD、引擎還是游戲公園，大家如果有什么技術幫助可以找我們 NVIDIA，我們也愿意跟所有的同行，所有的生態系統的合作伙伴共同把 VR 推向一個新的高度，這個點是非常好的點，全球的投資和全球的開發點，起步點是一樣的，沒有先后，中國絕對有機會超過全球其它國家，我們也希望中國的開發者能成為全球最的開發者，謝謝大家！

　　青瞳視覺：深挖單一技術才能成功

　　現在交互對虛擬現實來說越來越重要，在 2014 年頭盔越來越廉價，很多人用得起，效果越來越好，2014、2015 年大家關注點可能在頭盔領域。我們在做青瞳之前不是結合頭盔在用，它的領域非常多，我們更多的結合的是投影機、機器人領域做一些嘗試，但是每個嘗試沒有得到很好的市場反饋。

　　后面我們探索了很長時間，就選了虛擬現實主題公園這個方向，在 2015 年的時候，很多人介入到虛擬現實領域都是為了掘金，中間有一個很有趣的故事，當時廚師協會的會長跑進來做 VR 做了一段時間跟他想的不一樣，他堅持了半年投入了 60 多萬，結果跟自己想的不一樣，發現坑太深。

　　追蹤系統本身作為交互技術，可以跟 VR、AR、無人機結合都可以。所以現在追蹤在這塊，遠比我們想像的多，而且交互在后面的發展包括像現在主題公園，我們現在接觸了非常多的做主題樂園，包括做交互的，大家對交互意識重要性越來越大，他會測試幀速夠不夠，精度夠不夠。

　　我先說一下目前的當時在確定下來做追蹤市場的話，當時研究了幾項，包括在 Xbox、PS 等方面。在 PS 追蹤系統跟游戲結合互動，大家覺得坐在那兒玩不夠爽，青瞳的定位就是做大產品的追蹤，不做小的。我可能做一個桌面級的，PS 馬上能把我取代掉。我們后來定位就是參考了國外的模式，做 VR 的主題樂園。

　　這個是我們當時在分析的時候看每個板塊，這個也是國外的一些信息，大家可以看到每一個領域都需要追蹤。我最早做虛擬現實的教育領域，大家需要追蹤，或者模擬訓練，后面大家意識到模擬越來越重要。

　　這是當時做的幾個對比，因為一直在做這一塊，所以很多時候會被別人問到你們的差異在那兒，比如說 Kinect 是微軟的配件，價值非常便宜，用途也是最廣的，但是 Kinect 很難結合 VR 的做一些優秀的內容出來。Kinect 只有 30 幀的幀速，所以畫面有明顯的延遲。如果結合 VR 做一些深度的互動，我在里面可能還有道具和產品結合，Kinect 沒有辦法支撐。

　　比如做 VR 體驗的時候，規定只是人進去或者只是頭盔進去，我希望周邊的道具進去，把紅外點粘到槍上，槍可以是木頭槍，在虛擬現實里面可以辦成很酷的槍，沉浸感會把你帶進去。

　　還有一個激光發射基站是 HTC 現在在做的，用的最廣的。SLAM，現在非常紅，大家都在追著去用，因為現在大部分的追蹤方案對于空間產品的限制比較大，大家希望我的攝像機在頭盔上可以擺脫所有的束縛，用 SLAM 方式去做。但是它的數據非常大，包括延遲，離真正的商用還是有一段距離。

　　激光雷達我在所有的國內的線下的 VR 體驗基本上沒有見到過，激光雷達成本高。比如我在紅外的點上，貼到這個點可以定一個序號，比如這個序號是 1，但是激光雷達做不到，第二個也會有一些干擾因素。

　　這個是我們現在給自己的定位：賣最好的追蹤產品。第一個本身團隊的性質決定的，我們整個團隊 90% 偏研發，而且又是專門專攻追蹤這塊，基于這樣的情況我們專門做追蹤產品。我們自己的盈利模式、變現渠道都比較清晰。

　　這個是我們在做 VR 的主題公園整個的架構，在整個虛擬現實體驗，這里面最大的一塊在追蹤系統，現在很多虛擬現實的體驗，比如說我在上海某一個商場做一下，但是效率非常低，一個小時只能體驗一兩個人，這塊我們現在更多的是傾向和別人合作。我們跟米粒合作，它電影宣發要找亮點，而且它有自己的 IP 和內容。

　　最上面的部分是 Cameras，我們對于可見光、對紅外有一定的過濾。一般對于這樣的場地，對于光線有一定的要求，比如說 Cameras 上面有強電從旁邊經過，這種 Cameras 追蹤系統都不會特別穩定，細節的東西我們實踐的時候，發現很多東西遠比自己想的多。

　　這是應用結合比較緊的方向，第一個是線下體驗，我們現在做的 VR 主題樂園方面，線下體驗這種方式北京、上海和廣州都有一些示范的點出來，都能看到，而且基本上三個月迭代一次。

　　教育這塊，更多的是作為培訓，對互動的要求比較高，希望通過這種方式培養學生，通過虛擬的環境進行一些操作，可以得到一些學習的經驗。

　　軍事這塊，需求比較大，但是門檻比較高，軍工部分有保密機制，所以做市場化的公司沒有技術，沒有這個資質是不能直接做的，而且周期是比較長的，不一定適合我們現在做。

　　影視動畫，在影視動畫里面，我們跟影視基地合作，我們解決的是技術端的事情，具體的應用的東西他們通過他們實踐的方式反饋回來，通過他們的反饋再去迭代。