谷歌新專利曝光：通過(guò)眼動(dòng)追蹤攝像頭追蹤面部表情，增加AR/VR沉浸感

谷歌新專利曝光：通過(guò)眼動(dòng)追蹤攝像頭追蹤面部表情，增加AR/VR沉浸感

谷歌眼鏡雖然并沒(méi)有成為谷歌期望的熱門產(chǎn)品，但該公司依然致力于構(gòu)建更好的AR和VR技術(shù)。谷歌剛剛獲得了通過(guò)眼動(dòng)追蹤攝像頭追蹤面部表情的專利，這對(duì)創(chuàng)建沉浸式VR體驗(yàn)非常有幫助。

該專利被稱為“Classifying Facial Expressions Using Eye-Tracking Cameras（使用眼動(dòng)追蹤相機(jī)對(duì)面部表情進(jìn)行分類）”，通過(guò)與使用機(jī)器學(xué)習(xí)算法結(jié)合的眼動(dòng)追蹤傳感器來(lái)判斷用戶臉上的表情。該專利描述用戶能夠通過(guò)這項(xiàng)技術(shù)在虛擬世界中交互，呈現(xiàn)具體的面部表情。

正如該專利指出的那樣，由于VR頭顯往往會(huì)遮擋用戶的面部，因此很難分辨出用戶佩戴頭顯時(shí)的面部表情。然而，機(jī)器學(xué)習(xí)算法可以被訓(xùn)練以學(xué)習(xí)與憤怒、快樂(lè)、驚喜等相關(guān)情緒的表達(dá)有關(guān)的眉毛、唇部動(dòng)作。

技術(shù)能讓AR、VR體驗(yàn)更加身臨其境。虛擬現(xiàn)實(shí)已經(jīng)開始變得越來(lái)越普遍，然而，作為一個(gè)整體被認(rèn)為仍處于起步階段的技術(shù)，最大的問(wèn)題就是它的體驗(yàn)并沒(méi)有那么沉浸，低分辨率圖形以及性能問(wèn)題，讓用戶無(wú)法在虛擬現(xiàn)實(shí)中體驗(yàn)到足夠好的視覺(jué)效果。而谷歌的新技術(shù)能夠讓用戶在游戲和體驗(yàn)中獲得更深的沉浸感。

FundamentalVR合作梅奧醫(yī)療機(jī)構(gòu)合作開發(fā)VR模擬手術(shù)，籌資140萬(wàn)美元

日前，F(xiàn)undamentalVR訓(xùn)練與數(shù)據(jù)分析技術(shù)平臺(tái)宣布與著名的學(xué)術(shù)醫(yī)療機(jī)構(gòu)梅奧醫(yī)療機(jī)構(gòu)(Mayo Clinic)達(dá)成了為期三年的合作協(xié)議，雙方將共同開發(fā)外科VR模擬和培訓(xùn)產(chǎn)品。FundamentalVR同時(shí)得到了現(xiàn)有投資者Tern Plc額外的140萬(wàn)美元投資，使其總?cè)谫Y額達(dá)到245萬(wàn)美元。

據(jù)悉，此次合作伙是以梅奧醫(yī)療機(jī)構(gòu)的外科醫(yī)生和臨床從業(yè)人員為核心，以及3D建模，數(shù)據(jù)科學(xué)家和模擬專家的配合。雙方將致力于為基礎(chǔ)外科創(chuàng)建新的模擬內(nèi)容，評(píng)估標(biāo)準(zhǔn)和臨床驗(yàn)證。FundamentalVR在一份聲明中表示，他們也能夠從“無(wú)與倫比的臨床研究和驗(yàn)證機(jī)會(huì)”中獲益。

近日，梅奧醫(yī)療機(jī)構(gòu)聯(lián)合FundamentalVR開發(fā)出VR手術(shù)平臺(tái)Fundamental Surgery，并將其產(chǎn)品帶到美國(guó)亞利桑那州，佛羅里達(dá)州和明尼蘇達(dá)州的多個(gè)模擬中心。

FundamentalVR首席執(zhí)行官Richard Vincent認(rèn)為：“雙方的合作將大大加快我們的發(fā)展，梅奧醫(yī)療機(jī)構(gòu)的專業(yè)性使我們獲得最佳的手術(shù)知識(shí)。雙方都在為改善患者的治療效果而努力。考慮到這一點(diǎn)，我們認(rèn)為我們平臺(tái)提供的比較性數(shù)據(jù)分析和衡量標(biāo)準(zhǔn)將對(duì)全球人民的福祉產(chǎn)生深遠(yuǎn)的積極影響。我們的觸覺(jué)+沉浸式VR平臺(tái)能夠提供一種實(shí)現(xiàn)技能開發(fā)的新方法，令我們自豪的是我們受到美國(guó)領(lǐng)先且最具啟發(fā)性的醫(yī)療團(tuán)體之一的認(rèn)可。”

通過(guò)此次合作，這家公司希望可以利用梅奧醫(yī)療中心的專業(yè)知識(shí)，并最終擴(kuò)展平臺(tái)在教育，評(píng)估和評(píng)估方面的性能。

沃爾瑪為其iOS應(yīng)用添加AR掃描儀功能，可用于對(duì)比產(chǎn)品

沃爾瑪宣布在其iPhone應(yīng)用程序中推出一款新的AR掃描工具，該工具能夠幫助用戶進(jìn)行產(chǎn)品比較。與典型的條形碼掃描儀不同，沃爾瑪?shù)腁R掃描儀可以在商店貨架上進(jìn)行平移，提供有關(guān)定價(jià)和客戶評(píng)級(jí)的詳細(xì)信息。

該技術(shù)最初是由沃爾瑪內(nèi)部團(tuán)隊(duì)基于ARKit開發(fā)而成，當(dāng)時(shí)他們的想法是創(chuàng)建一種掃描體驗(yàn)，讓用戶在使用時(shí)更快。他們還希望構(gòu)建一個(gè)不僅僅只提供價(jià)格比較的掃描儀。

“沃爾瑪商店購(gòu)物者喜歡使用我們的移動(dòng)應(yīng)用條形碼掃描儀檢查價(jià)格，我們的團(tuán)隊(duì)認(rèn)為該產(chǎn)品的潛力很大，”沃爾瑪實(shí)驗(yàn)室高級(jí)工程經(jīng)理Tim Sears解釋道。“當(dāng)客戶啟動(dòng)掃描儀時(shí)，他們可以通過(guò)手機(jī)攝像頭連接數(shù)字和物理世界。”

使用該掃描儀需要在沃爾瑪應(yīng)用程序中啟動(dòng)該功能，然后將攝像頭指向要比較價(jià)格的產(chǎn)品。當(dāng)用戶在兩個(gè)產(chǎn)品之間移動(dòng)手機(jī)時(shí)，屏幕底部的產(chǎn)品信息圖塊將更新信息，包括產(chǎn)品名稱、價(jià)格和星級(jí)評(píng)分，并提供相關(guān)產(chǎn)品鏈接。

沃爾瑪并不是唯一一家使用AR技術(shù)的零售商。其他包括亞馬遜、Target、Wayfair等都已經(jīng)開始應(yīng)用AR技術(shù)。但在某些情況下，零售商選擇的方式多為讓產(chǎn)品可視化，或者為用戶提供試妝效果。沃爾瑪?shù)腁R掃描儀則更為實(shí)用。

這款A(yù)R掃描儀需要最新版本的沃爾瑪iOS應(yīng)用程序（18.20及更高版本），適用于至少運(yùn)行iOS 11.3的iPhone。由于該產(chǎn)品使用了ARKit 1.5，因此需要用戶使用較新的iPhone。

英國(guó)投資1000萬(wàn)英鎊用于建設(shè)VR/AR學(xué)校

英國(guó)政府授予倫敦大學(xué)國(guó)家電影電視學(xué)院和皇家霍洛威學(xué)院1000萬(wàn)英鎊（約合8989萬(wàn)元人民幣）的資金 ，用于建立一所VR（虛擬現(xiàn)實(shí)）和AR（增強(qiáng)現(xiàn)實(shí)）內(nèi)容開發(fā)的學(xué)校。

作為英國(guó)政府產(chǎn)業(yè)戰(zhàn)略的一部分，這兩所大學(xué)在與其他學(xué)術(shù)機(jī)構(gòu)的競(jìng)爭(zhēng)中勝出。他們將共同建立一個(gè) 沉浸式講故事的國(guó)家中心，這個(gè)中心將被稱為StoryFutures學(xué)院。

該研究所將開發(fā)新的培訓(xùn)和研究計(jì)劃，協(xié)助安排工作地點(diǎn)，并開展各種活動(dòng)，例如實(shí)驗(yàn)室和研討會(huì) ，所有這些活動(dòng)都將以虛擬現(xiàn)實(shí)、增強(qiáng)現(xiàn)實(shí)和混合現(xiàn)實(shí)為中心。

普華永道（PricewaterhouseCoopers）表示“我認(rèn)為VR/AR和所有這些沉浸式技術(shù)都具有相同的潛力。我已經(jīng)看到了足夠多的例子，足以讓我感到興奮。至少在未來(lái)五年，該行業(yè)將實(shí)現(xiàn)同比增長(zhǎng)，規(guī)模 每年至少會(huì)翻一番?！?/p>

此外，該中心還與游戲世界建立了聯(lián)系，Enslaved網(wǎng)站的聯(lián)合作者亞歷克斯·加蘭（Alex Garland）也 愿意參與其中，UKIE的首席執(zhí)行官喬·特維斯特（Jo Twist）也愿意加入新中心的指導(dǎo)委員會(huì)。Wardle 希望能夠借鑒更多VR游戲開發(fā)者的經(jīng)驗(yàn)，他們是這一領(lǐng)域的先鋒。