怎樣用AR全方位觀看世界杯？

世界杯將于本周開幕。然而，盡管它可能會(huì)令人興奮，但我們大多數(shù)人只能在平面電視上觀看，而無法親身感受現(xiàn)場(chǎng)觀看的3d體驗(yàn)。不過，華盛頓大學(xué)的研究人員日前提出了一種增強(qiáng)現(xiàn)實(shí)的替代方案。

研究人員開發(fā)的是一種機(jī)器學(xué)習(xí)算法，可以將2D足球片段轉(zhuǎn)換成3D重建，觀眾可以使用微軟的HoloLens等增強(qiáng)現(xiàn)實(shí)頭盔觀看。觀眾可將他們的桌子或餐桌之類的平面變成一個(gè)虛擬的比賽場(chǎng)地，并可以從不同的角度來觀看三維的比賽。

這并不等同于私人觀看，但它比普通的電視的觀看距離要近得多。而且觀看成本明顯低廉

“我們的目標(biāo)是提高觀看體育比賽的體驗(yàn)，”該項(xiàng)目的研究人員之一康斯坦丁諾斯·雷馬塔斯(Konstantinos Rematas)表示?！拔覀儧]有在平面的2D屏幕上觀看足球比賽或觀看其中的精彩時(shí)刻，而是將原始視頻轉(zhuǎn)換為3D，并在增強(qiáng)現(xiàn)實(shí)中進(jìn)行可視化觀看。”從本質(zhì)上講，游戲變成了一個(gè)全息圖，你可以在空間中四處移動(dòng)它，從不同的視角觀看，從而產(chǎn)生一種更浸染式的體驗(yàn)。

作為輸入的數(shù)據(jù)內(nèi)容, 生成AR體驗(yàn)的算法首先需要輸入一個(gè)YouTube足球視頻。但這不足以訓(xùn)練一個(gè)完整的能夠?qū)?D球員“升級(jí)”為3D的渲染系統(tǒng)，所以神經(jīng)網(wǎng)絡(luò)學(xué)會(huì)了通過已有的播放過的EA游戲“FIFA 2018”視頻來估算出渲染深度。利用這些信息的總和，該算法系統(tǒng)可以準(zhǔn)確地判斷球員在場(chǎng)上的位置。

目前，該算法系統(tǒng)仍在開發(fā)中。例如，球還沒有被正確地渲染出來(這在足球比賽中是相當(dāng)重要的)，球員們?nèi)匀槐３侄S剪切塊。這亮點(diǎn)是研究人員未來希望做出的兩個(gè)改進(jìn)。

“下一步是提高比賽畫面重建的質(zhì)量，”Rematas繼續(xù)說道。“特別是，我們想要精確地估計(jì)球的位置，并更好地重建球員——遮擋、完整的三維估計(jì)形狀等等。”此外，研究人員還計(jì)劃將這個(gè)算法框架應(yīng)用擴(kuò)展到其他運(yùn)動(dòng)中，如籃球、曲棍球和足球等。