高通Tim Leland對(duì)虛擬現(xiàn)實(shí)與增強(qiáng)現(xiàn)實(shí)的看法

　　高通對(duì)虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)感興趣，但對(duì)當(dāng)前技術(shù)還不滿意。該公司正在開發(fā)最新的移動(dòng)處理器和其他技術(shù)，希望讓VR和AR可以變得“無(wú)拘無(wú)束”、并能以更高的分辨率顯示圖像、使用更好的顯示器、讓其輕量化和提高節(jié)能效果，從而使得我們可以長(zhǎng)時(shí)間佩戴頭顯。隨著時(shí)間的推移，高通希望將所有必要的技術(shù)都嵌入到一個(gè)更小、更舒適的設(shè)備中。

　　負(fù)責(zé)實(shí)現(xiàn)該愿景的人之一是Tim Leland，高通產(chǎn)品管理副總裁。Venturebeat在舊金山舉行的VRX會(huì)議上采訪了Leland，探討了高通對(duì)虛擬現(xiàn)實(shí)、至今為實(shí)現(xiàn)高質(zhì)量無(wú)線 VR所取得的進(jìn)步、以及對(duì)增強(qiáng)現(xiàn)實(shí)的看法。以下是YiVian為大家整理的采訪片段：

　　可以總結(jié)一下你在臺(tái)上分享的內(nèi)容嗎？

　　高通相信VR正在發(fā)生。它會(huì)在2017年實(shí)現(xiàn)增長(zhǎng)，然后不斷壯大。隨著新技術(shù)的發(fā)展，尤其是顯示技術(shù)的發(fā)展，VR和AR將最終合并，AR會(huì)涵蓋VR。如果你想進(jìn)入VR模式，顯示屏可轉(zhuǎn)換成不透明。AR和VR將是同一個(gè)設(shè)備。我不認(rèn)為我們會(huì)過(guò)分擔(dān)心增強(qiáng)現(xiàn)實(shí)、混合現(xiàn)實(shí)或融合現(xiàn)實(shí)中的術(shù)語(yǔ)的連續(xù)性。這就是所有一切發(fā)展的方向。你會(huì)有虛擬對(duì)象，你可以放置在這個(gè)增強(qiáng)的世界中，并與之進(jìn)行交互。它們會(huì)被正確地錨定。

　　我們認(rèn)為AR的未來(lái)屬于移動(dòng)，因?yàn)檫@是消費(fèi)者想要的事情。消費(fèi)者不想被任何東西束縛。在延遲方面，在運(yùn)動(dòng)—光子和光子—光子的延遲方面存在對(duì)應(yīng)用性能的物理限制，但這會(huì)得到解決。如果你讓渲染系統(tǒng)與慣性或位置追蹤系統(tǒng)分離，限制就會(huì)出現(xiàn)。你希望這些系統(tǒng)可以緊密耦合，你可以，至少在同一個(gè)印刷電路板 （PCB）中，但在理想情況下是處于同一個(gè)系統(tǒng)單晶片（SOC）。

　　在未來(lái)的產(chǎn)品中，我們將會(huì)提高3D圖形和多媒體性能，提高能耗效率，所以你不會(huì)遇到這么一個(gè)情況：必須在視覺(jué)質(zhì)量+纜線和較低視覺(jué)質(zhì)量+無(wú)線這兩個(gè)選項(xiàng)中作出選擇。

　　我見(jiàn)過(guò)Facebook和英特爾都在研發(fā)他們的無(wú)線頭顯，一體化頭顯，沒(méi)有PC電腦。你認(rèn)為這會(huì)發(fā)生嗎？

　　我們有大約20個(gè)關(guān)于以一體化為主要目的的VR頭顯設(shè)計(jì)，要在VR頭顯市場(chǎng)中我們競(jìng)爭(zhēng)，你必須能夠在5瓦或更小的能耗下完成所有必要的處理。我們不認(rèn)為，在沒(méi)有針對(duì)異常發(fā)熱問(wèn)題的解決方案下，主要針對(duì)PC構(gòu)建的這些架構(gòu)可以引入到拓?fù)渲?。我們也不認(rèn)為你可以得到四或五個(gè)小時(shí)的續(xù)航時(shí)間。我們?cè)谶@方面有很多經(jīng)驗(yàn)，這是我們通過(guò)Daydream和其他頭顯開發(fā)所積累得到的。

　　你是如何看待一體化頭顯和智能手機(jī)插槽的VR設(shè)備。

　　在一些要求上，一體化頭顯和智能手機(jī)插槽的VR設(shè)備之間并無(wú)太大不同，很多要求都是一樣。我們一直在努力實(shí)現(xiàn)六個(gè)自由度，運(yùn)動(dòng)追蹤，由內(nèi)而外追蹤。要發(fā)揮其作用，你不會(huì)想被任何東西所束縛

　　我們認(rèn)為VR的未來(lái)是與AR的融合，而這會(huì)是移動(dòng)化。智能手機(jī)的定義也會(huì)隨著時(shí)間的推移而變化。所有這些都可以是某種高度集成的移動(dòng)可穿戴設(shè)備。

　?。ǜ咄ê臀④浂夹寄愕模旪?a target="_blank">芯片能夠運(yùn)行Windows 10。我想在某個(gè)時(shí)候，你們關(guān)心的不再會(huì)是哪個(gè)單獨(dú)的平臺(tái)，而是兼容所有的平臺(tái)。VR適合那個(gè)更大的策略嗎？

　　我們與微軟合作，與Facebook合作，也有與谷歌合作。我們認(rèn)為將有一些VR云端應(yīng)用程序，所以你想要能夠來(lái)回傳輸云端的數(shù)據(jù)。你希望本地能處理有特定數(shù)量的任務(wù)。你會(huì)希望機(jī)器學(xué)習(xí)的某些元素在本地執(zhí)行，而與云端服務(wù)對(duì)話。

　　5G時(shí)代即將到來(lái)，這會(huì)是一個(gè)很棒的技術(shù)，可減少無(wú)線客戶端和服務(wù)器之間的延遲，并增加了上行鏈路和下行鏈路帶寬的數(shù)量，這些設(shè)備將生產(chǎn)大量的數(shù)據(jù)。例如，我們錄制了大量的視頻數(shù)據(jù)，并將其發(fā)送回去，加上最高為8K分辨率的流媒體內(nèi)容的下載。集成連接組件、多模式5G連接、以及集成Wi-Fi和Wi- gig技術(shù)這樣的組合很棒。這與用于顯示管理的傳感器采樣和渲染子系統(tǒng)非常接近。相當(dāng)多的集成。

　　你有聽（Epic Games創(chuàng)始人）Tim Sweeney的演講嗎？

　　我有聽

　　我想知道他提到的某些技術(shù)在可行性上有幾許。他提到單眼顯示為8K的奧克利眼鏡（Oakley）。

　　我認(rèn)為分辨率可以實(shí)現(xiàn)。如果你希望它們一次性長(zhǎng)時(shí)間運(yùn)行，在主機(jī)和PC領(lǐng)域所采用一些強(qiáng)力方法需要改變，以滿足這些輕薄化設(shè)備的部分要求。一些漂亮的視覺(jué)效果，那些你需要花費(fèi)額外四五瓦功率才能實(shí)現(xiàn)的花哨著色效果，需要付出代價(jià)。這可能不是正確的決定。我們認(rèn)為一些中間件，如游戲引擎，將會(huì)進(jìn)化，所以你不會(huì)得到像‘嘿，看看這些出色的視覺(jué)效果’的體驗(yàn)，但你會(huì)有一根纜線連接到一臺(tái)2000美元的PC上。

　　我們需要比背包式PC做得更好，因?yàn)檫@并非消費(fèi)者想要購(gòu)買的東西。我們需要關(guān)注消費(fèi)者想要購(gòu)買的產(chǎn)品，也就是超輕薄化的眼鏡，讓你可以同時(shí)使用AR和VR 功能。你在AR模式可以獲取有趣和有用的數(shù)據(jù);你也可以選擇進(jìn)入VR模式，并感受一個(gè)優(yōu)秀的體驗(yàn)：舒適、輕量級(jí)、永遠(yuǎn)無(wú)線。

　　Tim Sweeney提到現(xiàn)在的顯示器主要是為智能手機(jī)所設(shè)計(jì)，如果你專為VR開發(fā)內(nèi)容，你可以使用不同的東西來(lái)實(shí)現(xiàn)高分辨率和低成本。

　　不僅只是分辨率，色域也是。這跟注視點(diǎn)渲染類似，所以你不必強(qiáng)行通過(guò)更多的像素進(jìn)行渲染。相反，你把渲染處理的重點(diǎn)放在眼睛實(shí)際聚焦的地方，在這個(gè)寬廣的視場(chǎng)中，你聚焦的區(qū)域并不大。這就是我所說(shuō)的，不能僅使用傳統(tǒng)的主機(jī)和PC渲染方法來(lái)處理視覺(jué)數(shù)據(jù)。VR行業(yè)必須靈活地實(shí)現(xiàn)這一點(diǎn)。我們必須共同努力，使這一切成為現(xiàn)實(shí)。

　　你認(rèn)同Sweeney關(guān)于Metaverse（超元域）的看法嗎？

　　他看過(guò)我們的一些圖形demo。當(dāng)我們?cè)隍旪?20，Unreal引擎4中展示時(shí)，他對(duì)在移動(dòng)平臺(tái)上可實(shí)現(xiàn)的視覺(jué)質(zhì)量感到非常驚訝。

　　至于Metaverse？對(duì)的，我喜歡他所說(shuō)的比喻。在過(guò)去，你需要知道如何編寫HTML和各種基本的編碼才能創(chuàng)建網(wǎng)頁(yè)，并把視覺(jué)信息發(fā)布到互聯(lián)網(wǎng)。隨著時(shí)間的推移，該工具集變得更加通用，所以每個(gè)人都可以創(chuàng)建自己的網(wǎng)站。當(dāng)談到朝向一個(gè)單一設(shè)備的趨同時(shí)，我和他的感覺(jué)很接近。很難說(shuō)虛擬世界的網(wǎng)站的最終形態(tài)是什么，但我同意他所談?wù)摰膸讉€(gè)概念。

　　談到我們即將公布的內(nèi)容，對(duì)于驍龍835，我們做出了一些改進(jìn)。其中一些在相機(jī)子系統(tǒng)中。有些是為了確保我們?yōu)榭蛻籼峁┑南鄼C(jī)功能解決方案的完整性。例如，在相機(jī)子系統(tǒng)中，我們現(xiàn)在支持Zig-zag HDR（HDR：高動(dòng)態(tài)光照渲染），這是一種空間方法，多路復(fù)用不同的曝光級(jí)別、不同的曝光時(shí)間，因此你可以得到這種HDR效果，并通過(guò)驍龍?zhí)幚砥髟趦?nèi)部進(jìn)行處理。這可以更好地映射出最高亮度下的陰影。你會(huì)得到更好的陰影分辨率。

　　我們還對(duì)支持10位顯示器的高動(dòng)態(tài)范圍做了一些改進(jìn)。我們不僅能夠以每秒60幀的速度解碼4K HDR 10視頻，而且我們也可以輸出該視頻。無(wú)需降低到標(biāo)準(zhǔn)動(dòng)態(tài)范圍的10位顯示器，可以一直保持高動(dòng)態(tài)范圍。

　　我們提高了圖形性能。我們一直在努力加快我們的Vulkan性能研發(fā)。我們將在驍龍835展示一些優(yōu)秀的VR demo，我們新的驍龍芯片參考設(shè)計(jì)會(huì)使用高端3D圖形和4K HDR視頻。我們尚未透露具體的類容，只能說(shuō)這是一個(gè)“新芯片”。

　　我們對(duì)視頻編碼子系統(tǒng)進(jìn)行了一些改進(jìn)，因此我們正在做諸如感知量化這樣的事情。我們沒(méi)有對(duì)編碼場(chǎng)景中的每個(gè)可能的宏塊進(jìn)行統(tǒng)一量化，我們根據(jù)的事實(shí)是：如果你有這堵墻，你可能會(huì)對(duì)一些編碼工件更敏感，而不是諸如灌木和樹木這樣的紋理，或者是移動(dòng)速度非?？斓臇|西。我們?cè)隍旪?35的Adreno 540子系統(tǒng)中的新視頻編碼器采用的是感知量化，而非統(tǒng)一的量化方法。

　　在模塊方面，我們一直與模塊制造商合作，預(yù)先優(yōu)化三個(gè)不同的模塊。其中一個(gè)是1600萬(wàn)像素的PDAF傳感器，具有出色的光學(xué)元件，非常高的圖像質(zhì)量。另一種是雙攝像頭的單Bayer傳感器，用于最大程度的低光攝影。第三種是具有寬視場(chǎng)的光學(xué)變焦雙攝像機(jī)解決方案。你在另一個(gè)傳感器上有一個(gè)望遠(yuǎn)鏡鏡片，用于最大縮放。我們還增強(qiáng)了一些縮放框架。我們可以在光學(xué)變焦和數(shù)碼變焦之間來(lái)回?zé)o縫轉(zhuǎn)換。

　　我們對(duì)電子圖像穩(wěn)定進(jìn)行了一些改進(jìn)，這在你進(jìn)行縮放時(shí)尤其有用。我們有新的軌跡算法，可以更準(zhǔn)確地采樣一些傳感器數(shù)據(jù)，以預(yù)測(cè)運(yùn)動(dòng)和衰減振動(dòng)。

　　你認(rèn)為這些事情會(huì)讓（Oculus技術(shù)總監(jiān)）約翰·卡馬克等人更開心嗎？ 他到目前為止都很挑剔。

　　我們一直在與卡馬克進(jìn)行對(duì)話?？偟膩?lái)說(shuō)，他在Twitter上說(shuō)過(guò)對(duì)驍龍非常有利的言論。我們有興趣獲得他對(duì)一些開發(fā)工具的反饋，因?yàn)樗麄冮_始做制作原型產(chǎn)品，并確保他們能在驍龍上獲得最好的性能。