0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

一文帶你全面熟悉智能語音之麥克風陣列技術的原理

電子設計 ? 來源:互聯(lián)網 ? 作者:佚名 ? 2017-12-13 14:06 ? 次閱讀

麥克風陣列(Microphone Array),從字面上,指的是麥克風的排列。也就是說由一定數(shù)目的聲學傳感器(一般是麥克風)組成,用來對聲場的空間特性進行采樣并處理的系統(tǒng)。

早在20世紀70、80年代,麥克風陣列已經被應用于語音信號處理的研究中,進入90年代以來,基于麥克風陣列的語音信號處理算法逐漸成為一個新的研究熱點。而到了“聲控時代”,這項技術的重要性顯得尤為突出。

麥克風陣列能干什么?

任何一項技術的發(fā)生發(fā)展都伴隨著問題的提出及解決,麥克風陣列也是如此。那么它主要應用在哪些場景下呢?又有著怎樣的功能!

◆【噪聲環(huán)境怎么破?】—— 語音增強(Speech Enhancement)

語音增強是指當語音信號被各種各樣的噪聲(包括語音)干擾甚至淹沒后,從含噪聲的語音信號中提取出純凈語音的過程。所以DingDong在嘈雜環(huán)境下,也能準確識別語音指令。

通過麥克風陣列波束形成進行語音增強示意圖

從20世紀60年代開始,Boll等研究者先后提出了針對使用一個麥克風的語音增強技術,稱為單通道語音增強。因為它使用的麥克風個數(shù)最少,并且充分考慮到了語音譜和噪聲譜的特性,使得這些方法在某些場景下也具有較好的噪聲抑制效果,并因其方法簡單、易于實現(xiàn)的特點廣泛應用于現(xiàn)有語音通信系統(tǒng)與消費電子系統(tǒng)中。

但是,在復雜的聲學環(huán)境下,噪聲總是來自于四面八方,且其與語音信號在時間和頻譜上常常是相互交疊的,再加上回波和混響的影響,利用單麥克風捕捉相對純凈的語音是非常困難的。而麥克風陣列融合了語音信號的空時信息,可以同時提取聲源并抑制噪聲。

目前科大訊飛已經實現(xiàn)了基于線性陣列、平面陣列以及空間立體陣列的波束形成和降噪技術,效果均達到業(yè)界一流水平。

2013年科大訊飛車載降噪產品和國際競爭對手效果對比

◆【說話人老是變幻位置怎么破?】——聲源定位(Source Localization)

現(xiàn)實中,聲源的位置是不斷變化的,這對于麥克風收音來說,是個障礙。麥克風陣列則可以進行聲源定位,聲源定位技術是指使用麥克風陣列來計算目標說話人的角度和距離,從而實現(xiàn)對目標說話人的跟蹤以及后續(xù)的語音定向拾取,是人機交互、音視頻會議等領域非常重要的前處理技術。所以麥克風陣列技術不限制說話人的運動,不需要移動位置以改變其接收方向,具有靈活的波束控制、較高的空間分辨率、高的信號增益與較強的抗干擾能力等特點,因而成為智能語音處理系統(tǒng)中捕捉說話人語音的重要手段。

混響產生原因示意圖

◆【室內回聲太大怎么破?】——去混響(Dereverberation)

一般我們聽音樂時,希望有混響的效果,這是聽覺上的一種享受。合適的混響會使得聲音圓潤動聽、富有感染力?;祉?Reverberation)現(xiàn)象指的是聲波在室內傳播時,要被墻壁、天花板、地板等障礙物形成反射聲,并和直達聲形成疊加,這種現(xiàn)象稱為混響。

但是,混響現(xiàn)象對于識別就沒有什么好處了。由于混響則會使得不同步的語音相互疊加,帶來了音素的交疊掩蔽效應(Phoneme Overlap Effect),從而嚴重影響語音識別效果。

影響語音識別的部分一般是晚期混響部分,所以去混響的主要工作重點是放在如何去除晚期混響上面,多年來,去混響技術抑制是業(yè)界研究的熱點和難點。利用麥克風陣列去混響的主要方法有以下幾種:

1、基于盲語音增強的方法(Blind signal enhancement approach),即將混響信號作為普通的加性噪聲信號,在這個上面應用語音增強算法。

2、基于波束形成的方法(Beamforming based approach),通過將多麥克風對收集的信號進行加權相加,在目標信號的方向形成一個拾音波束,同時衰減來自其他方向的反射聲。

3、基于逆濾波的方法(An inverse filtering approach),通過麥克風陣列估計房間的房間沖擊響應(Room Impulse Response, RIR),設計重構濾波器來補償來消除混響。

現(xiàn)在科大訊飛實現(xiàn)的基于麥克風陣列的去混響技術能很好的對房間的混響情況進行自適應的估計,從而很好的進行純凈信號的還原,顯著的提升了語音聽感和識別效果,在測試對比中,多種混響時間下識別效果接近手機近講水平。

混響語音信號頻譜

經過去混響后的語音信號頻譜

◆【說話人太多怎么破?】——聲源信號提取(分離)

家里人說話太多,DingDong聽誰的呢。這個時候就需要DingDong聰明的辨別出哪個聲音才是指令。而麥克風陣列可以實現(xiàn)聲源信號提取,聲源信號的提取就是從多個聲音信號中提取出目標信號,聲源信號分離技術則是將需要將多個混合聲音全部提取出來。

通過麥克風陣列波束形成做語音提取和分離

利用麥克風陣列做信號的提取和分離主要有以下幾種方式:

1、基于波束形成的方法,即通過向不同方向的聲源分別形成拾音波束,并且抑制其他方向的聲音,來進行語音提取或分離:

2、基于傳統(tǒng)的盲源信號分離(Blind Source Separation)的方法進行,主要包括主成分分析(Principal Component Analysis,PCA)和基于獨立成分分析(Independent Component Analysis,ICA)的方法。

進擊的麥克風陣列

麥克風陣列技術雖然已經可以達到相當?shù)募夹g水平,但是總體上還是存在一些問題的,比如當麥克風和信號源距離太遠時(比如10m、20m距離),錄制信號的信噪比會很低,算法處理難度很大;對于便攜設備來說,受設備尺寸以及功耗的限制,麥克風的個數(shù)不能太多,陣列尺寸也不能太大。而分布式麥克風陣列技術則是解決當前問題的一個可能途徑。所謂分布式陣列就是將子陣元或子陣列布局到更大的范圍內,相互之間通過有線或者無線的方式進行數(shù)據的交換和共享,并在此基礎上進行廣義上的聲源定位、波束形成等技術實現(xiàn)信號處理。

相對于目前集中式的麥克風陣列,分布式陣列的優(yōu)勢也是非常明顯的。首先分布式麥克風陣列(尤其無線傳輸)的尺寸的限制就不存在了;另外,陣列的節(jié)點可以覆蓋很大的面積——總會有一個陣列的節(jié)點距離聲源很近,錄音信噪比大幅度提升,算法處理難度也會降低,總體的信號處理的效果也會有非常顯著的提升,因此分布式陣列有可能是未來智能家居和會議系統(tǒng)中的主流方案。

在萬物互聯(lián)的今天,麥克風陣列技術已經深刻的走進了我們的日常生活。在智能車載、智能家居、機器人、可穿戴設備等應用熱潮正興起的時代,語音交互由于其便捷性,成了人機交互入口的第一選擇,麥克風陣列自然也成為其中非常重要的前端技術。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 麥克風陣列
    +關注

    關注

    4

    文章

    23

    瀏覽量

    14022
收藏 人收藏

    評論

    相關推薦

    基于Amazon AVS 智能音箱麥克風陣列立體聲開發(fā)方案

    適用于Amazon AVS的VocalFusion?立體聲開發(fā)套件具有緊湊的四麥克風線性陣列,使開發(fā)人員和OEM能夠為消費電子產品和物聯(lián)網產品添加遠場語音捕獲。線性設計經過優(yōu)化,可集成到智能
    發(fā)表于 07-12 10:25

    為什么需要麥克風陣列

    了某語音識別引擎在單麥克風和四麥克風環(huán)形陣列的識別率對比。另外也要提醒,語音識別率并非只有個W
    發(fā)表于 07-28 14:25

    科普麥克風陣列原理

    1 麥克風陣列麥克風陣列,是組位于空間不同位置的全向麥克風
    發(fā)表于 07-28 14:28

    麥克風陣列介紹

    模型和遠場模型的劃分沒有絕對的標準,般認為聲源離麥克風陣列中心參考點的距離遠大于信號波長時為遠場;反之,則為近場。設均勻線性陣列相鄰陣元之間的距離(又稱
    發(fā)表于 08-08 18:43

    全球量產麥克風陣列的陣型技術盤點

    知名產品的麥克風陣型也多種多樣,即便相同的陣型,其陣元間距也會不同,為何會產生這個現(xiàn)象?1、麥克風陣列技術首先從麥克風
    發(fā)表于 08-08 18:55

    汽車 麥克風陣列技術進行詳述

    的就是車輛運行過程中噪音比較大,當然其噪音還不算很復雜,加入CNN神經網絡、深度學習等技術會有很好的除噪效果。 下面就麥克風陣列技術進行詳述。定義
    發(fā)表于 08-10 14:30

    基于麥克風陣列語音盲信號分離DSP系統(tǒng)的信:本文構建了基于

    本文構建了基于麥克風陣列語音盲信號分離DSP實驗平臺,重點介紹了麥克風陣列的時分多路以及DMA結合McBSP的數(shù)據雙向傳輸
    發(fā)表于 05-09 13:20 ?34次下載

    麥克風陣列語音增強技術及其應用

    本文簡要敘述了應用麥克風陣列進行語音增強的原理及方法。且由于麥克風陣列在實際語音處理時具有良好的
    發(fā)表于 09-08 10:20 ?52次下載

    結合麥克風陣列及模型調整技術遠距離語音

    本篇論文提出種可應用于噪音環(huán)境下麥克風陣列(Microphone Array)的語音辨識演算 法,其主要的目的在于克服傳統(tǒng)電腦語音辨識系統(tǒng)
    發(fā)表于 03-29 09:59 ?48次下載

    基于麥克風陣列語音增強技術及應用

    麥克風陣列進行語音處理的方法可以提高信噪比,解決環(huán)境噪聲,回聲和混響引起的語音識別性能降低的問題。
    發(fā)表于 03-29 10:54 ?94次下載

    麥克風陣列原理與應用

    麥克風陣列原理與應用
    發(fā)表于 08-08 11:43 ?63次下載

    科大訊飛麥克風陣列模塊 麥克風設計參考手冊

    科大訊飛麥克風陣列模塊 麥克風設計參考手冊
    發(fā)表于 11-04 09:47 ?204次下載

    沐渥科技詳解麥克風陣列的原理、分類及作用

    從字面上看,麥克風陣列指的就是麥克風的排列。也就是將定數(shù)目的麥克風按照定的規(guī)則形狀進行布局形
    的頭像 發(fā)表于 07-11 17:22 ?1495次閱讀
    沐渥科技詳解<b class='flag-5'>麥克風</b><b class='flag-5'>陣列</b>的原理、分類及作用

    基于麥克風陣列的聲源定位技術

    電子發(fā)燒友網站提供《基于麥克風陣列的聲源定位技術.pdf》資料免費下載
    發(fā)表于 10-19 11:39 ?12次下載
    基于<b class='flag-5'>麥克風</b><b class='flag-5'>陣列</b>的聲源定位<b class='flag-5'>技術</b>

    全了解麥克風陣列

    什么是麥克風陣列? 想象一下一個小型音響部隊在你面前,它們站成排,用不同的麥克風捕捉聲音。這就是麥克風
    的頭像 發(fā)表于 09-03 16:03 ?474次閱讀
    <b class='flag-5'>一</b><b class='flag-5'>文</b>全了解<b class='flag-5'>麥克風</b><b class='flag-5'>陣列</b>