蘋(píng)果新專(zhuān)利曝光：正開(kāi)發(fā)眼球追蹤系統(tǒng)，或?qū)⒂糜谄銩R/VR產(chǎn)品

Bigscreen宣布將在VR中直播2019年DOTA 2國(guó)際錦標(biāo)賽

Bigscreen Inc.一直為跨平臺(tái)應(yīng)用程序Bigscreen Beta更新版本，最矚目的就是7月份推出的大屏幕電視功能。這使得這款應(yīng)用不僅僅作為一個(gè)屏幕共享社交應(yīng)用，也成為了一個(gè)娛樂(lè)門(mén)戶(hù)。雖然已經(jīng)添加了很多頻道，但Bigscreen Beta仍然想投身電子競(jìng)技市場(chǎng)來(lái)吸引新用戶(hù)，并宣布2019年的DOTA 2國(guó)際錦標(biāo)賽將于下周在平臺(tái)正式直播。

2019年國(guó)際電子競(jìng)技錦標(biāo)賽將在中國(guó)上海舉行，獎(jiǎng)金總額高達(dá)3200萬(wàn)美元，登位世界上最大的電子競(jìng)技賽事----最近的福特尼特世界杯(Fortnite world Cup)的獎(jiǎng)金總額為3000萬(wàn)美元。對(duì)于那些不能前往中國(guó)觀(guān)看的粉絲來(lái)說(shuō)，他們不用感謝Bigscreen Beta。

這并不是Valve第一次在VR平臺(tái)直播賽事，這項(xiàng)服務(wù)最初是在2016年面向HTC Vive用戶(hù)試用的。另一方面，由于HTC Vive、Valve Index、Windows Mixed Reality、Oculus Rift/Rift S、Oculus Go、Oculus Quest和三星GearVR等多平臺(tái)應(yīng)用程序的支持，更多的觀(guān)眾群體可以通過(guò)Bigscreen Beta觀(guān)看比賽。

在Bigscreen Beta版實(shí)時(shí)觀(guān)看2019年DOTA 2國(guó)際錦標(biāo)賽的同時(shí)，用戶(hù)也可以定制化身，改變虛擬環(huán)境，與朋友和其他DOTA 2粉絲進(jìn)行語(yǔ)音聊天。

2019年DOTA 2國(guó)際比賽日程如下:

8月15日- 8月18日-分組，18支隊(duì)伍將被分成兩組

8月20 - 24日-主流程

8月25日-總決賽(第一名凈收益1400萬(wàn)美元)

這并不是Bigscreen測(cè)試版的全部計(jì)劃。Bigscreen Inc.首席執(zhí)行官兼創(chuàng)始人Darshan Shankar在博客中寫(xiě)道:“Bigscreen還會(huì)在電子競(jìng)技領(lǐng)域做出更大貢獻(xiàn)，我們計(jì)劃創(chuàng)造一個(gè)‘eStadium’虛擬環(huán)境，粉絲們可以聚集在這里，為喜愛(ài)的隊(duì)伍加油?！?/p>

Snap推出新款A(yù)R太陽(yáng)眼鏡Spectacles 3

今日，Snap宣布推出新款A(yù)R眼鏡Spectacles 3，該產(chǎn)品是在此前的AR太陽(yáng)眼鏡的基礎(chǔ)上重新設(shè)計(jì)的產(chǎn)品，能夠捕捉照片和視頻，并直接上傳到旗下的Snapchat上。

Snap一直想從AR眼鏡業(yè)務(wù)中獲利，然而事與愿違，2017年因Spectacles滯銷(xiāo)導(dǎo)致公司虧損4000萬(wàn)美元。 Spectacles 3的發(fā)布讓Snap重新啟動(dòng)了建立新計(jì)算平臺(tái)得計(jì)劃。值得一提的是，新款限量版眼鏡的產(chǎn)量將低于之前的版本，使得Snap能夠繼續(xù)在AR技術(shù)領(lǐng)域進(jìn)行實(shí)驗(yàn)。該公司認(rèn)為，AR技術(shù)將是未來(lái)發(fā)展的一個(gè)重點(diǎn)項(xiàng)目。

Spectacles 3將于今年秋季上市，售價(jià)380美元，幾乎是之前版本售價(jià)的兩倍。該眼鏡將配備雙攝像頭，為照片和視頻增加深度和尺寸。Snap表示，用戶(hù)將內(nèi)容上傳到Snapchat后就可以為圖片添加新的燈光、風(fēng)景和三維效果。

Snap之所以在年輕用戶(hù)中積累了一定的聲譽(yù)，部分原因在于其AR功能。用戶(hù)可以在照片上增添各種濾鏡效果，甚至可以轉(zhuǎn)換性別。

Snap表示，該公司二季度新增1，300萬(wàn)用戶(hù)，其中700萬(wàn)至900萬(wàn)來(lái)自新的AR鏡頭。

上周，Snap表示將籌集10億美元的短期債務(wù)，用于投資更多媒體內(nèi)容，AR功能，并收購(gòu)相關(guān)企業(yè)。

0Snap今年在美股市場(chǎng)表現(xiàn)出色，自1月份以來(lái)已上漲逾200%，目前的市值為200多億美元。

最后一位Oculus聯(lián)合創(chuàng)始人Nate Mitchell宣布離開(kāi)Facebook

最后一位留在Facebook的Oculus聯(lián)合創(chuàng)始人Nate Mitchell宣布將離職。Mitchell擔(dān)任的最后職位是Oculus的Rift團(tuán)隊(duì)及Facebook虛擬現(xiàn)實(shí)產(chǎn)品負(fù)責(zé)人，他今天在Reddit的帖子中分享了“苦樂(lè)參半”的聲明。

Mitchell說(shuō)道：“嘿大家好，我有一些苦樂(lè)參半的新聞要與這個(gè)社區(qū)分享。在經(jīng)過(guò)7年不可思議的歲月之后，我決定離開(kāi)Oculus/Facebook并繼續(xù)前進(jìn)?！? “當(dāng)我們2012年開(kāi)始在Kickstarter上發(fā)起眾籌的時(shí)候，VR還是個(gè)出現(xiàn)在科幻小說(shuō)中的角色。我們不知道人們是否會(huì)認(rèn)真對(duì)待我們，我們甚至不確定我們是否能達(dá)到最初的$250k目標(biāo)。但是來(lái)自世界各地的人在這個(gè)社區(qū)中聚集，幫助VR成為了現(xiàn)實(shí)。在之后迎來(lái)了快速發(fā)展，VR每天都在改變?nèi)藗兊纳?，這些都是因?yàn)槟銈儭? 虛擬現(xiàn)實(shí)仍然處于技術(shù)的最前沿，這個(gè)社區(qū)也將繼續(xù)開(kāi)拓前進(jìn)的道路。前路總是未知的，這就是令人興奮的原因。保持大膽，繼續(xù)探尋未來(lái)。 至于我的下一步是什么：我需要時(shí)間旅行，與家人在一起，并充電。當(dāng)然我還會(huì)是這個(gè)社區(qū)中的一員，但我扮演的角色要小得多。 我希望Facebook令人難以置信的團(tuán)隊(duì)能夠繼續(xù)履行建立下一代計(jì)算平臺(tái)的使命，并帶來(lái)驚喜和喜悅，我迫不及待的想看看接下來(lái)會(huì)發(fā)生什么。 致大家：感謝你的熱情和創(chuàng)造力，謝謝你相信不可能的事，感謝你每天激勵(lì)我們。 感謝這令人驚嘆的7年時(shí)光?！? 目前還不清楚Mitchell是否因?yàn)槊芏x開(kāi)，但這相當(dāng)突然。目前Facebook尚未找到取代Mitchell的人選。一位發(fā)言人告訴外媒VentureBeat，該公司“正在積極尋找適合的人選來(lái)領(lǐng)導(dǎo)VR產(chǎn)品，但Mitchell的離職并未影響我們的路線(xiàn)圖或未來(lái)計(jì)劃?！? Facebook擁有的幾位公司創(chuàng)始人在過(guò)去幾年中以相當(dāng)快的速度退出公司。在2017年，Oculus知名的聯(lián)合創(chuàng)始人Palmer Luckey離開(kāi)公司，隨后是2018年底的Brendan Iribe。在去年，Instagram和Whatsapp的共同創(chuàng)始人也離開(kāi)了。

蘋(píng)果新專(zhuān)利曝光：正開(kāi)發(fā)眼球追蹤系統(tǒng)，或?qū)⒂糜谄銩R/VR產(chǎn)品

一直有傳言稱(chēng)，蘋(píng)果的VR或AR頭顯將把眼球追蹤功能引入其控制系統(tǒng)。對(duì)此，iPhone制造商提出了一個(gè)設(shè)計(jì)方案，使眼球追蹤系統(tǒng)在運(yùn)動(dòng)狀態(tài)下也盡可能保持精確。

鼠標(biāo)和鍵盤(pán)一直是Mac及其他電腦的主要控制系統(tǒng)，而觸摸屏是iPhone或iPad的主要使用方式。雖然近年來(lái)，尤其是在移動(dòng)設(shè)備上，語(yǔ)音已經(jīng)成為一種廣泛應(yīng)用的交互方式，但弊端是不夠準(zhǔn)確或靈活，不能適用于所有任務(wù)，比如在用戶(hù)選擇的特定顯示點(diǎn)上執(zhí)行操作。

在頭戴顯示器上，VR的控制系統(tǒng)主要是有運(yùn)動(dòng)跟蹤功能的手持控制器。控制器可以根據(jù)頭戴顯示器的位置映射軌跡，在應(yīng)用程序中用光標(biāo)或手掌形狀的標(biāo)識(shí)定位。 眼球追蹤是另一種與虛擬現(xiàn)實(shí)環(huán)境進(jìn)行交互的方式，可以檢測(cè)出用戶(hù)顯示屏上的特別關(guān)注。比起用手操作菜單或其他軟件系統(tǒng)，這種交互方式更自然、更準(zhǔn)確，也少了些尷尬。

然而，由于用戶(hù)的耳機(jī)一直處于運(yùn)動(dòng)狀態(tài)，眼球追蹤的準(zhǔn)確性會(huì)收到干擾。即使固定在頭部，耳機(jī)仍然會(huì)移動(dòng)，用戶(hù)的眼睛和眼球跟蹤系統(tǒng)之間的距離一直在變化，效率會(huì)降低。

周二，在美國(guó)專(zhuān)利商標(biāo)局授予蘋(píng)果的一項(xiàng)專(zhuān)利中，就提到了這款可以利用概率和場(chǎng)景檢測(cè)來(lái)解決漂移問(wèn)題的“注視點(diǎn)追蹤系統(tǒng)的電子設(shè)備”。這并不是一個(gè)全新的硬件解決方案，而是有效地建議加入一個(gè)帶有眼球跟蹤系統(tǒng)的軟件，以增強(qiáng)選擇物品的能力。

專(zhuān)利文件概述了具體的工作原理：“電子設(shè)備中的控制電路可以為顯示內(nèi)容產(chǎn)生顯著圖。顯著圖可用于識(shí)別顯示內(nèi)容中的視覺(jué)興趣項(xiàng)。顯著圖可以識(shí)別諸如可選按鈕，文本和其他視覺(jué)興趣項(xiàng)。諸如鼠標(biāo)點(diǎn)擊，語(yǔ)音命令和其他用戶(hù)輸入可以與注視點(diǎn)監(jiān)測(cè)系統(tǒng)的輸出結(jié)合，從而確定用戶(hù)正在查看的對(duì)象。這允許控制電路精確地判斷用戶(hù)在實(shí)際屏幕中的注視點(diǎn)位置?！?

演示如何查看顯著圖上的特定顯示點(diǎn)

在正常使用中，當(dāng)用戶(hù)進(jìn)行選擇時(shí)，注視點(diǎn)檢測(cè)功能可以確定用戶(hù)正在查看的對(duì)象，并使用顯著圖（Saliency Map），猜測(cè)他們具體在看什么，并使用一個(gè)單獨(dú)的控制器來(lái)確認(rèn)選擇。

除了輔助選擇，顯著圖還可以使眼睛跟蹤系統(tǒng)更準(zhǔn)確。通過(guò)比較用戶(hù)的視線(xiàn)方位、視角、顯著圖上與注視點(diǎn)相關(guān)的興趣區(qū)域，以及語(yǔ)音等其他數(shù)據(jù)，系統(tǒng)就可以確定頭顯的移動(dòng)軌跡。

這種移動(dòng)軌跡的檢測(cè)可以實(shí)時(shí)校準(zhǔn)眼球跟蹤系統(tǒng)，增強(qiáng)準(zhǔn)確性。

眼睛跟蹤系統(tǒng)校準(zhǔn)流程圖 蘋(píng)果每周都會(huì)向美國(guó)專(zhuān)利商標(biāo)局遞交大量專(zhuān)利申請(qǐng)，雖然不能保證這一設(shè)計(jì)理念會(huì)應(yīng)用到未來(lái)的產(chǎn)品服務(wù)中，但它確實(shí)表明了蘋(píng)果研發(fā)工作的興趣領(lǐng)域。蘋(píng)果已經(jīng)研發(fā)AR和VR設(shè)備很多年了，有望在2020年發(fā)布AR智能眼鏡。

蘋(píng)果公司積累了大量相關(guān)技術(shù)專(zhuān)利，甚至嘗試向AR和VR領(lǐng)域推廣產(chǎn)品，比如在macOS上演示VR，以及在iOS上推出AR Kit。蘋(píng)果還在2017年收購(gòu)了德國(guó)一家專(zhuān)業(yè)眼球追蹤技術(shù)的公司SensoMotoric Instruments。

2018年，蘋(píng)果公司申請(qǐng)了一項(xiàng)眼球追蹤系統(tǒng)的專(zhuān)利。系統(tǒng)利用“熱鏡”把紅外光反射到用戶(hù)的眼睛中，需要安裝在離用戶(hù)臉?lè)浅＝牡胤?，盡可能帶來(lái)舒適體驗(yàn)。2015年，蘋(píng)果一項(xiàng)基于注視點(diǎn)的眼球追蹤專(zhuān)利成功通過(guò)，用戶(hù)可以通過(guò)注視屏幕控制iOS或macOS設(shè)備，同時(shí)也緩解了特羅克斯勒效應(yīng)(Troxler Effect)，減少對(duì)視覺(jué)互動(dòng)體驗(yàn)的影響。

2019年5月的一份專(zhuān)利申請(qǐng)?jiān)敿?xì)演示了怎樣可以確定用戶(hù)的主導(dǎo)眼球，這一數(shù)據(jù)點(diǎn)通過(guò)分析眼睛定位數(shù)據(jù)的多少，將進(jìn)一步改善眼睛跟蹤系統(tǒng)。