2018年8月21日，英偉達(dá)在德國(guó)科隆發(fā)布了新一代基于Turing架構(gòu)的顯卡：GeForceRTX2080/2080Ti。預(yù)購(gòu)RTX2080及RTX2080TI的朋友基本已經(jīng)收到實(shí)物了，不知道各位對(duì)這一新的“煤氣灶”是否滿意？火力夠不夠旺？玩笑歸玩笑。回到VR行業(yè)中，相信有不少觀眾對(duì)新顯卡會(huì)有疑問(wèn)，這新顯卡對(duì)VR能有多大的作用？

借此契機(jī)，陀螺菌在廣州天河NVIDIA RTX溝通會(huì)上采訪到NVIDIA中國(guó)區(qū)技術(shù)市場(chǎng)經(jīng)理朱亮，探討GeForce RTX20系列對(duì)VR開(kāi)發(fā)帶來(lái)的可能性。

“4K基本滿足游戲競(jìng)技對(duì)屏幕的要求，分辨率（高分辨率的使用場(chǎng)景）的未來(lái)市場(chǎng)在VR上”，朱亮說(shuō)道。

實(shí)時(shí)光線追蹤+深度學(xué)習(xí)，把CG電影的效果用在游戲上

此處推出的新旗艦為GeForce RTX 2080Ti，次旗艦為GeForce RTX 2080，出人意料的是新顯卡并沒(méi)有使用坊間猜測(cè)的GTX 1180這一名稱。此次的新品，NVIDIA不但將系列名稱直接升到GeForce 20，而且舍去了延用十代的GTX這一前置，取而代之的是RTX。

RTX的名稱的是由光線追蹤Ray Tracing的兩個(gè)首字母R和T組成，NVIDIA RTX所指的便是實(shí)時(shí)光線追蹤技術(shù)。雖然名字聽(tīng)上去很厲害，但相較于全新的Turing架構(gòu)，其名稱的改動(dòng)就顯得微不足道。

由于Turing架構(gòu)涉及過(guò)多專業(yè)性的技術(shù)，網(wǎng)上技術(shù)論壇已經(jīng)有較為詳細(xì)的分析，陀螺菌在此便不做過(guò)多的贅述，下文主要以新架構(gòu)帶來(lái)的功能和開(kāi)發(fā)可能性進(jìn)行分析。

Turing架構(gòu)其實(shí)并不是完全陌生的，去年NVIDIA發(fā)布了TITAN V時(shí)就已展示過(guò)這項(xiàng)架構(gòu)，這次NVIDIA換了一種方式用Turing架構(gòu)來(lái)構(gòu)建游戲產(chǎn)品線。按照NVIDIA以往的顯卡展示習(xí)慣，每一代旗艦游戲顯卡都脫胎于該架構(gòu)的首款TITAN。

實(shí)時(shí)光線追蹤

新顯卡的測(cè)評(píng)首先帶來(lái)刷新率和畫(huà)面效果的提升。新的兩款顯卡RTX 2080與GTX 1080Ti在實(shí)測(cè)中，展示了不俗的成績(jī)，在4K畫(huà)質(zhì)下都能穩(wěn)定流暢地運(yùn)行游戲。且比GTX 1080Ti高出15左右的幀。有同行的小伙伴使用兩款顯卡對(duì)《使命召喚》進(jìn)行了測(cè)試，RTX 2080達(dá)到了的93fps，接近破百。

不僅如此，新顯卡提供了新的游戲設(shè)計(jì)方向，且大大提高玩家的游戲真實(shí)度——實(shí)時(shí)光線追蹤。

傳統(tǒng)的3D渲染一直使用一種叫做光柵化技術(shù)。這項(xiàng)技術(shù)多年來(lái)一直是實(shí)時(shí)渲染的常規(guī)技術(shù)，長(zhǎng)期使用在游戲中。但是這個(gè)技術(shù)存在一定的缺陷，如光柵化的陰影經(jīng)常出現(xiàn)混淆和光泄漏，導(dǎo)致程序員需要去進(jìn)行BUG修復(fù)，且真實(shí)感弱。而光線追蹤技術(shù)長(zhǎng)期以來(lái)被用于非實(shí)時(shí)繪制，它通過(guò)模擬光的物理行為來(lái)提供逼真的光照。

光線追蹤通過(guò)跟蹤光從觀看者的眼睛穿過(guò)虛擬3D場(chǎng)景時(shí)的路徑來(lái)計(jì)算像素的顏色。當(dāng)它穿越場(chǎng)景時(shí)，光可以從一個(gè)物體引起反射至其他物體，被物體阻擋會(huì)產(chǎn)生陰影，或者穿過(guò)透明或半透明物體。所有這些相互作用被組合以產(chǎn)生然后在屏幕上顯示的像素的最終顏色。這一種計(jì)算工作十分繁重且高負(fù)荷的渲染技術(shù)，對(duì)硬件的要求較高，所以更多的用于制作CG和電影。

新的GeForce 20在Turing架構(gòu)的每個(gè)SM中新增RT Core是邁向?qū)崟r(shí)光線追蹤的關(guān)鍵，硬件加速是實(shí)現(xiàn)這一目標(biāo)的唯一途徑。將CG電影的技術(shù)用于游戲中，獲得更流暢、更好的游戲體驗(yàn)，提高沉浸感。

在技術(shù)的探討中，朱亮說(shuō)出了一句：“4K基本滿足游戲競(jìng)技對(duì)屏幕的要求，分辨率（高分辨率的使用場(chǎng)景）的未來(lái)市場(chǎng)在VR上?！?/p>

人工智能

在之前的Volta GV100中，英偉達(dá)首次引入的張量核心Tensor Core，而此次的Turing架構(gòu)中的張量核心是前者的增強(qiáng)版本。它設(shè)計(jì)增加了INT8和INT4精確模式來(lái)測(cè)算可接受的工作負(fù)載，F(xiàn)P16也完全支持這種工作負(fù)載的精確測(cè)算。

在基于Turing的GeForce游戲核心中引入張量?jī)?nèi)核，將AI實(shí)時(shí)深度學(xué)習(xí)引入游戲應(yīng)用程序。Turing張量核心加速了NVIDIA NGX神經(jīng)服務(wù)的基于AI的特性，增強(qiáng)了圖形、渲染和其他類型的客戶端應(yīng)用程序的效率。對(duì)此朱亮舉了一個(gè)例子：“之前的AI學(xué)習(xí)例如阿爾法狗，它的學(xué)習(xí)行為就像司機(jī)叫新手上路，但是不同的路況就要有指導(dǎo)，這導(dǎo)致有太多的人工干預(yù)。Turing張量核心加速和提高了AI的學(xué)習(xí)過(guò)程及能力，現(xiàn)在老司機(jī)只要帶他開(kāi)一次，他就可以自己學(xué)習(xí)了，這可以大大減輕開(kāi)發(fā)者的開(kāi)發(fā)難度和精力。”

新的NGX神經(jīng)圖形框架將AI集成到整個(gè)圖形管線中，使AI算法能夠執(zhí)行驚人的圖像增強(qiáng)和生成。采用可變速率著色的新圖靈著色器架構(gòu)允許著色器將處理能力集中在細(xì)節(jié)豐富的區(qū)域，從而提高整體性能。例如游戲過(guò)程中，AI會(huì)著重渲染游玩的畫(huà)面，對(duì)不需要渲染的地方進(jìn)行適當(dāng)舍棄。在VR游戲、應(yīng)用中，游戲的特殊性會(huì)出現(xiàn)許多畫(huà)面渲染上的問(wèn)題，而人工智能的學(xué)習(xí)，可以很大程度的減少游戲運(yùn)行負(fù)荷，提高渲染效率。

Virtual Link接口

從外觀來(lái)看，GeForce 20對(duì)VR帶來(lái)的最大的變化就是VirtualLink，現(xiàn)階段的VR頭顯與PC的連接需要2-3條線，以HTC為例，需要一個(gè)USB接口、一個(gè)HDMI接口及另一個(gè)充電線。這對(duì)終端用戶來(lái)說(shuō)會(huì)導(dǎo)致線條繁雜的情況，一定情況會(huì)限制了玩家在戴著頭盔時(shí)四處走動(dòng)的能力。

相信有不少小伙伴嘗試過(guò)玩到一半，其中一個(gè)接口脫落的情況。為了解決這個(gè)問(wèn)題，NVIDIA將其中一個(gè)視訊輸出端口設(shè)計(jì)為USB-C并得到SudialLink的硬件支持，叫做VirtualLink。VirtualLink能將VR頭盔的供電、顯示和回傳數(shù)據(jù)整合到一個(gè)USB-C連接上。

Turing 引入的 USB-C 輸出可以支持 HBR3 四信道 DP 支持或者 HBR3 雙信道 DP+ 雙信道 SuperSpeed USB3 支持。而 VirtualLink 則跟更一步，在提供 HBR3 四信道 DP 的同時(shí)還支持 SuperSpeed USB 3 用于傳輸反饋控制信號(hào)。USB-C 和 VirtualLink 都能為頭盔供電，其中 USB-C 提供了 100 瓦的可選供電支持，而 VirtualLink 則是強(qiáng)制 5 瓦、可選 27瓦。如果頭盔的耗電在 27 瓦內(nèi)，使用一根 VirtualLink 就能滿足包括供電、顯示、控制反饋，比目前的三根線要簡(jiǎn)單多了，而它的接口同樣是 USB-C。

目前，VirtualLink 獲得了 NVIDIA、AMD、微軟、Oculus、Valve 的支持。據(jù)朱亮透露國(guó)內(nèi)已經(jīng)有三家頭顯設(shè)計(jì)廠商在進(jìn)行基于VirtualLink接口的頭顯設(shè)計(jì)，而HTC目前并沒(méi)有與英偉達(dá)有技術(shù)交流。

在接口設(shè)計(jì)上，陀螺菌咨詢了VirtualLink轉(zhuǎn)接外設(shè)技術(shù)的相關(guān)問(wèn)題（通過(guò)轉(zhuǎn)接器將之前的USB線和HDMI線轉(zhuǎn)換成VirtualLink），朱亮表示：“在理論上是可行的?！遍_(kāi)發(fā)者們對(duì)此有沒(méi)有一些新的想法呢？

VR游戲開(kāi)發(fā)空間擴(kuò)大，更寬的視域，更沉浸的音效

以上便是GeForce 20帶來(lái)新的技術(shù)進(jìn)步，對(duì)于VR而言，能在4K的分辨率下，保持60Fps以上的游戲體驗(yàn)，就能有流暢且不會(huì)暈眩的游戲體驗(yàn)。但是4K的VR頭顯，技術(shù)還不太完善。VR體驗(yàn)現(xiàn)階段最大的限制有兩個(gè)，其一是頭顯硬件，其二是主機(jī)硬件能否保證優(yōu)質(zhì)畫(huà)面及流暢性。

“在VR游戲體驗(yàn)中，更多的是注重沉浸感和真實(shí)度，傳統(tǒng)的顯卡是沒(méi)法達(dá)到實(shí)時(shí)光線追蹤，且此次顯卡帶的HW-Accelerated RT Audio（聲學(xué)模擬）和Variable Rate Shading（可變速率著色）。能更好的達(dá)到模擬現(xiàn)實(shí)，讓游戲體驗(yàn)更加真實(shí)?！敝炝琳f(shuō)道。

除了上文所寫(xiě)的功能外，新的顯卡在VR方面還帶來(lái)聲音的效果渲染的功能——HW-Accelerated RT Audio（聲學(xué)模擬）。這個(gè)功能能讓游戲的聲音效果與環(huán)境的畫(huà)面重合，讓聲更加真實(shí)，讓游戲的沉浸感受更強(qiáng)。

另一方面人工智能芯片還帶來(lái)一項(xiàng)新功能——可變速率著色(VRS,VariableRateShading) 。這個(gè)功能能夠優(yōu)化渲染。主要方法是在場(chǎng)景的細(xì)節(jié)區(qū)域中應(yīng)用更多著色性能，并在擁有較少可感知細(xì)節(jié)的場(chǎng)景中限制性能。這可以降低場(chǎng)景外圍區(qū)域（用戶不太可能留意的區(qū)域，尤其是當(dāng)與眼動(dòng)追蹤相結(jié)合時(shí)）的著色率，從而用于焦點(diǎn)渲染。這使得大場(chǎng)景的VR世界有更好渲染效果，減少渲染功耗。

在英偉達(dá)的VR技術(shù)，有一個(gè)名為Multi-View Rendering（超寬視域）的功能，這項(xiàng)功能支持頭顯開(kāi)發(fā)者在設(shè)計(jì)VR頭顯時(shí)，更進(jìn)一步擴(kuò)充視域面積。在現(xiàn)階段的VR頭顯中，不難發(fā)現(xiàn)會(huì)存在邊緣視覺(jué)死角的問(wèn)題。玩過(guò)Oculus Go的小伙伴都知道，由于頭顯模型的設(shè)計(jì)的影響，不少東方人在使用時(shí)出現(xiàn)漏光的問(wèn)題，這會(huì)導(dǎo)致游戲體驗(yàn)很“出戲”。要解決這個(gè)問(wèn)題，提高玩家沉浸感，需要讓頭顯的視域大于眼睛的視域。讓眼睛的視域重合在游戲世界當(dāng)中。

考慮到有的觀眾是游戲玩家，陀螺菌也查找了相關(guān)的性能資料。在性能提升方面，國(guó)內(nèi)的游戲網(wǎng)站Game234對(duì)2080TI在SteamVR進(jìn)行基準(zhǔn)測(cè)試。RTX 2080TI的性能幾乎是GTX 2080的兩倍，2080也要比1080好上大約50%。這也比使用DX11、DX12進(jìn)行測(cè)試得到的結(jié)果差距更大，在這些環(huán)境下，2080會(huì)比1080強(qiáng)大約30%-40%。2080TI比1080TI快大約30%，但要注意的是，未來(lái)那些使用RT或者Tensor核心的游戲?qū)?huì)得到更好的優(yōu)化。

從測(cè)試結(jié)果來(lái)看，新一代英偉達(dá)顯卡對(duì)于VR程序的圖形顯示優(yōu)化有了大幅度的提升。對(duì)于Vive Pro、三星玄龍或者StarVR這些高分辨率的VR頭顯來(lái)說(shuō)，2080或者2080 TI提升的圖形處理性能將會(huì)大大提升顯示效果。

英偉達(dá)為代表的巨頭都在不停的推動(dòng)行業(yè)的發(fā)展

除了上面所提的功能之外，在很多細(xì)節(jié)方面也有設(shè)計(jì)了不少新的功能，以用于方便開(kāi)發(fā)者進(jìn)行開(kāi)發(fā)。從2016年GTX10系列到現(xiàn)在的RTX20系列，我們能看到英偉達(dá)在不斷的在畫(huà)面、刷新率、優(yōu)化等領(lǐng)域刺激和推動(dòng)著VR硬件的發(fā)展，且以十分前沿的思想去推動(dòng)VR行業(yè)的發(fā)展。

上面所提的很多功能中，在現(xiàn)階段很難找到相關(guān)的硬件進(jìn)行配置，以4K頭顯為例，現(xiàn)在市場(chǎng)上的單眼4K頭顯僅有小派和Star VR兩家。且這些設(shè)備都是今年發(fā)布的產(chǎn)品。雖然產(chǎn)品少而且還不能達(dá)到理想的狀態(tài)，但是我們還是能從中看到VR行業(yè)的發(fā)展。VR產(chǎn)業(yè)的發(fā)展不是僅靠一家就可以推動(dòng)的，電腦配置、頭顯終端、芯片等都是其發(fā)展的要素缺一不可。

今年VR行業(yè)雖然整體較為偏冷，但是我們還是能看到不少大廠在用實(shí)際行動(dòng)在為這一個(gè)行業(yè)的發(fā)展打基礎(chǔ)。

NVIDIA 全球副總裁、中國(guó)區(qū)總經(jīng)理張建中在之前的采訪中也多次提到：“VR 是非常有前景的行業(yè)，我非?？春?VR 的發(fā)展，在今后很多年的發(fā)展當(dāng)中，VR 將會(huì)一直引導(dǎo)整個(gè)計(jì)算行業(yè)跟圖形行業(yè)的發(fā)展。在過(guò)去幾年當(dāng)中，我們發(fā)現(xiàn)整個(gè)行業(yè)生態(tài)系統(tǒng)已經(jīng)慢慢建立起來(lái)了。"

而英偉達(dá)，則正是給VR構(gòu)建生態(tài)的重要一員。

雖然在投資領(lǐng)域英偉達(dá)沒(méi)有的太多動(dòng)向，但其在VR領(lǐng)域卻有著不少的研究，在今年3月份英偉達(dá)與無(wú)人駕駛汽車平臺(tái)DRIVE進(jìn)行虛擬遠(yuǎn)程控制汽車；在今年4月份英偉達(dá)Holodesk將IKinema動(dòng)捕技術(shù)整合到其體系之中，并進(jìn)行相關(guān)技術(shù)研發(fā)；在今年9月份英偉達(dá)為開(kāi)發(fā)者推出VRWorks SDK 3.0版本等。我們能看到其在VR領(lǐng)域的耕耘。