Meta的Flamera頭顯降低準(zhǔn)確直通AR所需的原始計(jì)算能力

Meta的最新原型頭顯Flamera像是直接從科幻動(dòng)作片中來(lái)的一樣，它在Siggraph 2023上引起了人們的注意 —— Flamera在那里獲得了令人垂涎的Best in Show獎(jiǎng)。

據(jù)悉，F(xiàn)lamera原型頭顯展示了接近人眼分辨率和全新的"透視"真實(shí)世界的技術(shù)。該原型或許為VR、MR和AR的未來(lái)鋪平了道路。頭顯原型展示的技術(shù)突破引發(fā)了人們的興趣和關(guān)注。

Moor Insights&Strategy副總裁兼首席分析師Ansel Sag表示：“這絕對(duì)是我見(jiàn)過(guò)的質(zhì)量最好的（增強(qiáng)現(xiàn)實(shí)）實(shí)現(xiàn)透視真實(shí)世界的全新方法?！?/p>

出于顯而易見(jiàn)的原因，在物理上不可能將頭顯的攝像頭與用戶的眼睛完全放置在同一位置。這種位移導(dǎo)致了我（作者，以下簡(jiǎn)稱(chēng)我）個(gè)人經(jīng)歷的視角的轉(zhuǎn)變：我在使用AR/VR頭顯時(shí)撞到了墻上，或者被被椅子絆倒了。像Meta Quest Pro這樣的尖端頭顯，通過(guò)從正確的角度重新投射周?chē)h(huán)境的視圖，跨越了這一障礙，但解決方案可能會(huì)導(dǎo)致視覺(jué)失真。

Meta的蟲(chóng)眼Flamera提出了一個(gè)新穎的解決方案。它摒棄了當(dāng)前頭顯青睞的外部攝像頭陣列，采用了獨(dú)特的“光場(chǎng)穿透”設(shè)計(jì)，將圖像傳感器與物理控制到達(dá)傳感器的光的孔徑配對(duì)。會(huì)導(dǎo)致不正確視角的光被阻擋，而提供準(zhǔn)確視角的光則被允許到達(dá)傳感器。

當(dāng)直接通過(guò)鏡頭觀看時(shí)，結(jié)果很奇怪：這有點(diǎn)像透過(guò)紙上的洞看世界。頭顯重新排列原始圖像以消除間隙并重新定位傳感器數(shù)據(jù)。一旦這個(gè)過(guò)程完成，耳機(jī)就會(huì)為用戶提供準(zhǔn)確的世界視圖。

Sag說(shuō)：“這絕對(duì)是一個(gè)原型，但它的圖像質(zhì)量和分辨率給我留下了深刻印象?！?“幀速率很好，”ModiFace的軟件開(kāi)發(fā)總監(jiān)Edgar Maucourant也演示了這款頭顯，并對(duì)此印象深刻，“我的眼睛所看到的東西和我的手的位置與我的手真正的位置之間沒(méi)有延遲，也沒(méi)有差異?！?/p>

Maucourant認(rèn)為Flamera的準(zhǔn)確性可能會(huì)為用戶直接與周?chē)澜缁?dòng)的AR應(yīng)用程序帶來(lái)福音?！袄纾绻覀兛紤]遠(yuǎn)程輔助，人們必須操縱物體，那么今天它是用HoloLens和Magic Leap等AR眼鏡來(lái)實(shí)現(xiàn)的……我們可以想象使用AR穿透來(lái)實(shí)現(xiàn)這一點(diǎn)?！?/p>

與微軟的HoloLens和Magic Leap進(jìn)行比較很重要。它們通過(guò)透明顯示器繞過(guò)了透視問(wèn)題，讓用戶的視覺(jué)暢通無(wú)阻。當(dāng)HoloLens于2016年發(fā)布時(shí)，這種方法感覺(jué)像是未來(lái)的趨勢(shì)，但其顯示質(zhì)量、視野和亮度仍然存在問(wèn)題。

Meta的Quest Pro和蘋(píng)果即將推出的Vision Pro強(qiáng)調(diào)了這一方向的轉(zhuǎn)變。盡管以AR/VR頭顯（或者，蘋(píng)果方以“空間計(jì)算機(jī)”）的形式進(jìn)行營(yíng)銷(xiāo)，但它們顯然是虛擬現(xiàn)實(shí)家族的一個(gè)分支。它們通過(guò)不透明的顯示器完全遮擋了用戶的視野。增強(qiáng)現(xiàn)實(shí)是通過(guò)視頻饋送提供的，該視頻饋送將外部世界投射到顯示器。

Vision Pro解決直通問(wèn)題的方法更注重肌肉而非大腦。它使用了一系列與其他AR/VR頭顯類(lèi)似的外部攝像頭，但將其與蘋(píng)果定制的R1芯片配對(duì)，該芯片與蘋(píng)果M2芯片協(xié)同工作（就像該公司筆記本電腦中的芯片一樣）。R1是一個(gè)“視覺(jué)處理器”，可以幫助vision Pro的12臺(tái)相機(jī)通過(guò)計(jì)算校正視角（以及其他任務(wù)）。這很像Meta在Quest Pro上嘗試的方法，但蘋(píng)果將功率提高到了11。

META

Meta的Flamera取而代之的是用鏡頭校正視角。這大大降低了準(zhǔn)確直通AR所需的原始計(jì)算能力。

但這并不是說(shuō)Meta已經(jīng)完全打開(kāi)了AR。Flamera的技術(shù)距離可供購(gòu)買(mǎi)的頭顯還有很長(zhǎng)的路要走，目前與傳統(tǒng)的直通AR相比存在一些缺點(diǎn)。Sag表示，該頭顯“視野相當(dāng)有限”，并注意到其景深“不連續(xù)”，這意味著遠(yuǎn)處的物體看起來(lái)比實(shí)際更近。Maucourant警告說(shuō)“顏色不太好”，并認(rèn)為頭顯的分辨率很低。

盡管如此，F(xiàn)lamera或展示了Meta、蘋(píng)果和其他希望進(jìn)入AR領(lǐng)域的公司之間即將發(fā)生的爭(zhēng)論方向。科技界的大腕們似乎確信，明天最好的AR/VR頭顯看起來(lái)更像最初的Oculus Rift，而不是微軟的HoloLens。然而，目前這些原型更多還是在研究階段，離成為消費(fèi)級(jí)產(chǎn)品還有一段距離。未來(lái)，頭顯技術(shù)的發(fā)展還需要在各個(gè)方面進(jìn)行突破和創(chuàng)新，以實(shí)現(xiàn)更高的分辨率、更低的延遲、更舒適的使用體驗(yàn)等。只有解決了這些問(wèn)題，才能讓用戶真正感受到頭顯帶來(lái)的沉浸式體驗(yàn)，進(jìn)一步推動(dòng)VR、MR和AR技術(shù)的廣泛應(yīng)用。

審核編輯：彭菁