0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

你知道嗎?VR中是把游戲音頻放在聚光燈里!

Dbwd_Imgtec ? 來源:未知 ? 作者:伍文輝 ? 2018-03-28 14:10 ? 次閱讀

存在感

人們掛在嘴邊來描述VR(虛擬現(xiàn)實(shí))的單詞是“沉浸感”。的確是很酷的一個(gè)詞。然而為實(shí)現(xiàn)這終極目標(biāo),開發(fā)者需要在虛擬現(xiàn)實(shí)的環(huán)境中模擬身體的知覺,我們稱著為存在感。存在是一種心理狀態(tài)或主觀感知,其中,部分或整體個(gè)人體驗(yàn)感受是/或是通過人造的科技過濾產(chǎn)生的,部分或整體體驗(yàn)是/或是由在體驗(yàn)中對(duì)角色的精確認(rèn)知導(dǎo)致人為認(rèn)知衰退造成的。

創(chuàng)造這個(gè)級(jí)別的真實(shí)體驗(yàn)確實(shí)是一個(gè)挑戰(zhàn)。當(dāng)前的圖形比之前幾年有了巨大的進(jìn)步,音頻仍然有很長的路要走,以達(dá)到其在這個(gè)新的和仍在發(fā)展的VR領(lǐng)域中發(fā)揮主要作用的真正潛力。

在VR游戲中空間包圍和多感官應(yīng)用

在獨(dú)立和PC游戲中,沉浸感被分為三項(xiàng):敘事性沉浸(玩家投入到故事中去),戰(zhàn)術(shù)沉浸(玩家執(zhí)行涉及到技能的操作)和策略沉浸(更專注,與精力挑戰(zhàn))。然而在VR中,又添加了第四項(xiàng):空間沉浸,也就是說玩家在人造的世界中對(duì)他們來說是真實(shí)的。在包括前三項(xiàng)的沉浸感中,當(dāng)涉及到存在感和提供可信性和沉浸的環(huán)境中,空間沉浸變的非常重要。

人為了生理上對(duì)自己定位,我們的視覺系統(tǒng)通常被用來幫助身體感覺環(huán)境,耳朵提供了關(guān)于我們周圍環(huán)境的重要信息,味覺也同樣提供周圍信息。

音頻在某角度來說比視覺更好,因?yàn)椴皇芤曈X范圍的限制,而是對(duì)我們周圍環(huán)境信息提供了360度的反饋。

為創(chuàng)建真實(shí)空間的沉浸感,理想情況下,我們希望可以利用我們的五官,且有全感覺加工處理(在一個(gè)環(huán)境中有效的使用我們的身體的過程)。問題在于當(dāng)前階段的VR開放,我們不可能使用全部的五官感覺。視覺和聽覺做為了主要的因素,觸覺不是很有效,味覺和氣味完全沒有用武之地。在這種情況下,聽覺也許是我們可以開發(fā)的用來“影響”用戶大腦的最強(qiáng)大的媒介了,創(chuàng)建一個(gè)完整的360度體驗(yàn),提高空間沉浸,由于它是通過一個(gè)虛擬的源通過模擬聲學(xué)來呈現(xiàn)一個(gè)現(xiàn)實(shí)的空間(這個(gè)在場(chǎng)景中或?qū)嶋H中不是必須的)。

360度的體驗(yàn)創(chuàng)建空間沉浸

實(shí)現(xiàn)音頻增強(qiáng)空間沉浸感的第一步是音頻定位。從最近的研究(Skalski & Whitbred, 2010)中出現(xiàn)一個(gè)模式表明,在游戲中(環(huán)繞立體聲)中,更好的音源位置對(duì)玩家空間沉浸感和享受的影響比視頻質(zhì)量(高清VS普清)要大的多。

大腦通過我們兩只耳朵之間的響度,音調(diào)和時(shí)間的細(xì)微差別來定位聲源在三維中的位置(水平,垂直和距離)。在虛擬現(xiàn)實(shí)中,玩家確實(shí)在場(chǎng)景中間,因此在模擬聲音環(huán)境中決定聲源位置的過程,對(duì)創(chuàng)建自然聽覺體驗(yàn)音頻改進(jìn)是最重要的。

在媒體史的早起,我們發(fā)現(xiàn)人耳第一次雙耳錄音來拾取三維音頻可追溯到1881年。

“雙耳錄制是一種使用兩個(gè)麥克風(fēng)錄制聲音的方法,旨在為演奏者或樂器的房間中的收聽者創(chuàng)建三維立體聲感覺。 這種效果通常使用稱為“偽人頭錄音”的技術(shù)來創(chuàng)建,其中在人體模型頭部每個(gè)耳朵中配備有麥克風(fēng)?!埃ňS基百科,”雙耳錄音“)

在游戲中,3D音頻應(yīng)該用實(shí)時(shí)處理的方法來創(chuàng)建,因?yàn)槲覀儧]有辦法預(yù)期聲音對(duì)象的硬廣在某個(gè)位置,來匹配玩家位置和頭部移動(dòng)。因此在其被發(fā)明一個(gè)世紀(jì)后,現(xiàn)在雙耳錄音正在被重新使用,且工程師和投資者都正在努力開發(fā)適合于VR的最近雙耳算法

而實(shí)際上,由于需使用的立體聲耳機(jī)而不是揚(yáng)聲器來復(fù)制3D定位(在VR中將玩家與外部世界隔離是必要的,并且對(duì)于視野范圍,需要可以匹配相對(duì)于頭/耳運(yùn)動(dòng)的音頻回放)的這個(gè)特性 ,專業(yè)人員邏輯上愿意選擇雙耳作為3D音頻處理的新標(biāo)準(zhǔn),而不是通常的環(huán)繞技術(shù)(僅限于水平和距離音頻定位)。

總結(jié)

在我們使用VR時(shí),有許多音頻事情需要挑戰(zhàn)、考慮,且需求正在增長。通過進(jìn)一步的探索,我們將會(huì)推動(dòng)VR和游戲產(chǎn)業(yè)的邊際。雖然游戲行業(yè)一直在提高最新一代優(yōu)先級(jí)的畫面質(zhì)量,伴隨這VR的迅速崛起,VR行業(yè)迅速的集中到來音頻領(lǐng)域,因?yàn)閂R社區(qū)意識(shí)到,更好的音頻實(shí)現(xiàn)會(huì)大大增加玩家的享受和參與感,提高沉浸狀態(tài),最終提高存在感。

360度的音頻定位只是VR開發(fā)帶來的音頻改進(jìn)的一個(gè)直接結(jié)果。音頻的處理工具也隨著VR需求發(fā)展也不斷發(fā)展,新技術(shù)及其在混合領(lǐng)域用于VR技術(shù)需求方面,以增強(qiáng)VR體驗(yàn)。

音頻是行業(yè)探索和聚焦的下一個(gè)新媒介,VR肯定會(huì)讓音頻成為焦點(diǎn)!

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 音頻
    +關(guān)注

    關(guān)注

    29

    文章

    2830

    瀏覽量

    81266
  • vr
    vr
    +關(guān)注

    關(guān)注

    34

    文章

    9630

    瀏覽量

    149983

原文標(biāo)題:VR中為什么需要把游戲音頻放在聚光燈里?

文章出處:【微信號(hào):Imgtec,微信公眾號(hào):Imagination Tech】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    如何優(yōu)化PAR38 LED聚光燈并且提高工作效率

    照明設(shè)計(jì)師可以通過選擇合適的LED驅(qū)動(dòng)器和LED來實(shí)現(xiàn)低成本,高效率,可調(diào)光的PAR38定向聚光燈。 LED應(yīng)該提供高流明輸出,出色的光學(xué)控制和色彩一致性,而LED驅(qū)動(dòng)器提供緊湊的尺寸,低散熱要求和出色的調(diào)光性。
    的頭像 發(fā)表于 01-25 08:17 ?5802次閱讀

    【每日一貼日志】親愛的,知道嗎?

    家務(wù)的女孩,我不喜歡做飯。親愛的,知道嗎?本來是沒什么的,可是認(rèn)識(shí)以后,我感覺我是世界上最笨的女孩。親愛的,知道嗎?我害怕,是因?yàn)槲視?huì)
    發(fā)表于 09-29 15:18

    RFID應(yīng)用的7類技術(shù)問題知道嗎?

    RFID應(yīng)用參考架構(gòu)是由哪些部分組成的?RFID應(yīng)用的7類技術(shù)問題知道嗎
    發(fā)表于 05-25 06:32

    DIY設(shè)計(jì)智能RGB/RGBCW聚光燈

    描述智能 RGB/RGBCW 聚光燈 - PROXIMA ALPHA它是什么?緊湊的設(shè)計(jì)使 Proxima Alpha 成為便攜式 LED 聚光燈有 40 個(gè) RGB LED、一個(gè)
    發(fā)表于 08-22 06:31

    科銳推出新型LED聚光燈 和白熾相比節(jié)能87%

    科銳(CREE)公司推出一種新型4英寸CR4 LED聚光燈和更高光強(qiáng)度的6英寸聚光燈。無止境的創(chuàng)新公司能夠突破LED應(yīng)用的成本障礙,同時(shí)在性能、顏色品質(zhì)和方便性上超出行業(yè)最高標(biāo)準(zhǔn)。新的
    發(fā)表于 07-25 09:49 ?1167次閱讀

    汽車后視鏡的科學(xué),知道嗎?

    汽車后視鏡的科學(xué),知道嗎?,感興趣的小伙伴們可以看看我的上傳的資源,有分享更多。
    發(fā)表于 08-12 15:13 ?53次下載

    無線充電IC知道嗎

    無線充電IC知道嗎
    發(fā)表于 01-22 19:37 ?47次下載

    如何參考設(shè)計(jì)可以優(yōu)化的效率的LED聚光燈

    照明設(shè)計(jì)師可以實(shí)現(xiàn)低成本、高效率、可調(diào)方向的聚光燈下通過選擇合適的LED驅(qū)動(dòng)器和LED的工作。LED應(yīng)提供較高的流明輸出,優(yōu)異的光學(xué)控制和顏色的一致性,而LED驅(qū)動(dòng)器提供了一個(gè)緊湊的尺寸,低散熱的要求,和優(yōu)秀的dimmability。
    發(fā)表于 06-12 08:49 ?17次下載

    MIUI的這10個(gè)小設(shè)置知道嗎

    其實(shí)在MIUI,藏著很多個(gè)性化的選擇,接下來的這10個(gè)小設(shè)置,知道嗎
    的頭像 發(fā)表于 05-08 16:53 ?4265次閱讀

    關(guān)于VR是什么知道嗎

    在如今的信息發(fā)達(dá)的社會(huì)中出現(xiàn)了很多的新名詞,比如我們今天所說的VR,那到現(xiàn)在為止有的人還不知道什么是VR吧!
    發(fā)表于 06-24 10:09 ?6163次閱讀

    《半條命VR(Half-Life: Alyx)》預(yù)告片上線 VR推到了聚光燈

    近日,《半條命VR(Half-Life: Alyx)》的公告和預(yù)告片VR推到了主流游戲聚光燈下,目前在YouTube和Twitter上,
    發(fā)表于 11-28 10:21 ?943次閱讀

    聚光燈下的電源管理

    聚光燈下的電源管理
    發(fā)表于 05-26 12:38 ?9次下載
    <b class='flag-5'>聚光燈</b>下的電源管理

    智能RGB/RGBCW聚光燈開源分享

    電子發(fā)燒友網(wǎng)站提供《智能RGB/RGBCW聚光燈開源分享.zip》資料免費(fèi)下載
    發(fā)表于 07-29 09:28 ?3次下載
    智能RGB/RGBCW<b class='flag-5'>聚光燈</b>開源分享

    通過DMX使用Arduino控制LED聚光燈設(shè)置

    電子發(fā)燒友網(wǎng)站提供《通過DMX使用Arduino控制LED聚光燈設(shè)置.zip》資料免費(fèi)下載
    發(fā)表于 10-26 11:21 ?1次下載
    通過DMX使用Arduino控制LED<b class='flag-5'>聚光燈</b>設(shè)置

    聚光燈之外”的激光雷達(dá)公司的活法

    這段時(shí)間,筆者接觸了不少部分激光雷達(dá)公司的專家、主機(jī)廠與自動(dòng)駕駛解決方案商負(fù)責(zé)激光雷達(dá)選型方面的專家,與他們探討了“聚光燈之外”的激光雷達(dá)公司面臨的挑戰(zhàn)與機(jī)遇,以及未來的生存模式。
    的頭像 發(fā)表于 04-26 10:02 ?765次閱讀
    “<b class='flag-5'>聚光燈</b>之外”的激光雷達(dá)公司的活法