0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線(xiàn)課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

軟DSP處理用于語(yǔ)音引擎設(shè)計(jì)是需注意哪些事項(xiàng)

電子設(shè)計(jì) ? 來(lái)源:電子工程專(zhuān)輯 ? 作者:D Technologies ? 2021-06-23 17:06 ? 次閱讀

目前無(wú)繩電話(huà)或IP電話(huà)使用的通用SoC集成了接入器件和統(tǒng)一的無(wú)線(xiàn)通信器件,并且在系統(tǒng)軟件中集成軟件語(yǔ)音引擎,可以完全支持VoIP要求的軟件數(shù)字信號(hào)處理。語(yǔ)音引擎采用了軟DSP(soft-DSP)實(shí)現(xiàn)技術(shù),能夠滿(mǎn)足嵌入式處理器的系統(tǒng)性能要求。為了確保VoIP具有電話(huà)質(zhì)量的語(yǔ)音性能,系統(tǒng)軟件必須滿(mǎn)足語(yǔ)音引擎的實(shí)時(shí)要求。

下一代軟DSP產(chǎn)品采用了實(shí)時(shí)處理和寬帶(高清晰度)語(yǔ)音通信技術(shù),可以比當(dāng)前技術(shù)取得更大的最終用戶(hù)滿(mǎn)意度和市場(chǎng)潛力。這些產(chǎn)品為語(yǔ)音通信建立了新的高清晰度標(biāo)準(zhǔn)。根據(jù)本文建議開(kāi)發(fā)的產(chǎn)品可以取得超過(guò)電話(huà)質(zhì)量通信的效果。相反,不滿(mǎn)足這些實(shí)時(shí)要求將造成許多語(yǔ)音質(zhì)量劣化的癥狀,包括掉話(huà)、顯著的時(shí)延、爆破音或卡嗒聲、傳真/調(diào)制解調(diào)器呼叫失敗或傳真頁(yè)錯(cuò)亂,以及由于丟包或超額延時(shí)造成的語(yǔ)音不清等等。不滿(mǎn)足實(shí)時(shí)要求還將導(dǎo)致錯(cuò)過(guò)時(shí)限,這將是嚴(yán)重的系統(tǒng)故障,需要整個(gè)系統(tǒng)復(fù)位才能解決,除非系統(tǒng)支持硬件和軟件的恢復(fù)。

電話(huà)呼叫中的語(yǔ)音通信是雙向的:音頻的發(fā)送和接收同時(shí)進(jìn)行。因此盡量減小語(yǔ)音系統(tǒng)中的延時(shí)以確保音頻質(zhì)量很關(guān)鍵;然而,減小時(shí)延的優(yōu)化工作與滿(mǎn)足語(yǔ)音處理要求相沖突。在傳統(tǒng)的回放音頻系統(tǒng)中,如音頻(MP3)回放或多媒體流,緩存可以做得很大以補(bǔ)償系統(tǒng)處理能力的低下,此時(shí)延時(shí)與質(zhì)量無(wú)關(guān)。語(yǔ)音引擎卻不能這樣做,因?yàn)橐纛l緩存必須能在固定時(shí)間得到全部處理。這種架構(gòu)通常采用中斷優(yōu)先級(jí)劃分和軟件調(diào)度,利用甚至在某些時(shí)候增強(qiáng)操作系統(tǒng)的實(shí)時(shí)性能來(lái)保證語(yǔ)音處理的完成。

在語(yǔ)音引擎系統(tǒng)中,軟件中斷服務(wù)程序?qū)⑴c語(yǔ)音硬件編解碼器交換語(yǔ)音采樣。語(yǔ)音硬件編解碼器以8kHz的采樣速率完成模擬信號(hào)與音頻采樣之間的來(lái)回轉(zhuǎn)換。在電話(huà)應(yīng)用中,硬件編解碼器被連接到作為電話(huà)物理接口的用戶(hù)線(xiàn)接口電路(SLIC)或無(wú)繩電話(huà)的DECT射頻電路。而在IP電話(huà)或移動(dòng)手機(jī)場(chǎng)合,硬件編解碼器被連接到放大器,放大器再與麥克風(fēng)和揚(yáng)聲器相連。

SoC硬件接口在保證語(yǔ)音引擎的實(shí)時(shí)性能和準(zhǔn)確調(diào)度方面扮演著關(guān)鍵的角色。如果SoC帶TDM或AC97外設(shè),電話(huà)語(yǔ)音編解碼器可以直接連到處理器。如果嵌入式處理器不帶這些外設(shè),最低成本的解決方案是經(jīng)過(guò)一個(gè)CPLD再與處理器相連。CPLD可以從硬件編解碼器逐個(gè)收發(fā)采樣,這種方案對(duì)時(shí)間最敏感,并且代表了最壞情況下的時(shí)序要求。

不管是通過(guò)TDM、AC97還是CPLD,語(yǔ)音硬件服務(wù)必須優(yōu)先處理以確保中斷得到響應(yīng);其他系統(tǒng)軟件必須不影響這個(gè)中斷的關(guān)鍵時(shí)序。在8kHz的采樣速率下,中斷將每125μs發(fā)生一次。對(duì)于運(yùn)行在200MHz的SoC來(lái)說(shuō),針對(duì)速度優(yōu)化過(guò)的CPLD中斷服務(wù)程序處理時(shí)間在25μs以?xún)?nèi)。這就允許最大中斷延時(shí)的計(jì)算值為90μs(125μs–(25μs+中斷服務(wù)建立時(shí)間10μs))。系統(tǒng)要想滿(mǎn)足實(shí)時(shí)時(shí)限,操作系統(tǒng)必須在收到編解碼器中斷后的90μs內(nèi)調(diào)用中斷服務(wù)程序,并且操作系統(tǒng)必須允許服務(wù)運(yùn)行并立即完成。

操作系統(tǒng)還必須保證中斷服務(wù)程序可以調(diào)度語(yǔ)音引擎,以便立即對(duì)在音頻緩存進(jìn)行處理。中斷服務(wù)程序使用緩存準(zhǔn)備好信號(hào)激活這種調(diào)度,如圖所示。在該圖中可以看到,DMA外設(shè)用來(lái)將音頻采樣采集到緩存中供語(yǔ)音引擎的處理,這種方法的效率要比CPLD實(shí)現(xiàn)高。

對(duì)語(yǔ)音引擎的要求是要在下一個(gè)語(yǔ)音緩存準(zhǔn)備好之前完成語(yǔ)音采樣的處理。語(yǔ)音引擎中處理語(yǔ)音所需的時(shí)間取決于多個(gè)因素,包括處理器、緩存大小、RAM速度、物理語(yǔ)音接口數(shù)量(音頻通道)、緩存要求的軟件DSP處理以及所用的語(yǔ)音編碼器類(lèi)型。

要想全面地分析語(yǔ)音引擎時(shí)序要求,請(qǐng)參考附表。tidle參數(shù)代表的是所有其他系統(tǒng)進(jìn)程或系統(tǒng)應(yīng)用程序留給可用處理的剩余時(shí)間。從語(yǔ)音引擎設(shè)計(jì)角度看,就是指空閑時(shí)間。所有較低優(yōu)先級(jí)系統(tǒng)的處理都是發(fā)生在語(yǔ)音引擎完成實(shí)時(shí)語(yǔ)音處理后的空閑時(shí)間內(nèi)。在最壞情況下,tidle可能為0ms,此時(shí)語(yǔ)音引擎處理會(huì)有多次反復(fù)。

D2科技公司的vPort軟件包含了針對(duì)所支持配置的性能基準(zhǔn)。例如,vPort版本可能規(guī)定三方G.729AB語(yǔ)音會(huì)議呼叫的語(yǔ)音處理,作為最壞情況和緩存連續(xù)清空的條件下,要求語(yǔ)音引擎提供每10ms最大100MHz的處理能力。如果運(yùn)行在400MHz RISC處理器上,tvoice在最壞情況處理時(shí)要求100MHz(CPU處理能力的25%),對(duì)應(yīng)每隔10ms處理間隔中的2.5ms處理時(shí)間。如果tswitch超過(guò)7.5ms(tswitch=tbuffer–(tvoice+tidle)),實(shí)時(shí)時(shí)限就無(wú)法滿(mǎn)足,這個(gè)時(shí)間還不包括在語(yǔ)音引擎處理期間由于其他外設(shè)中斷、下半部處理或“tasklet”軟中斷引起的額外開(kāi)銷(xiāo)。

以下是設(shè)計(jì)師在集成用于軟DSP處理的語(yǔ)音引擎時(shí)需要考慮的最重要的一些設(shè)計(jì)準(zhǔn)則:

1. 為了使質(zhì)量最優(yōu),語(yǔ)音通信要求最小化系統(tǒng)時(shí)延;

2. 語(yǔ)音通信是連續(xù)的,丟失采樣或失去實(shí)時(shí)性將是最嚴(yán)重的錯(cuò)誤;

3. 語(yǔ)音硬件有嚴(yán)格的時(shí)序要求,在丟失時(shí)序時(shí)需要一種差錯(cuò)恢復(fù)機(jī)制;

4. 語(yǔ)音引擎實(shí)時(shí)處理必須在10ms的軟件時(shí)限內(nèi)完成對(duì)語(yǔ)音緩存的處理。語(yǔ)音引擎中斷服務(wù)程序在CPU外設(shè)硬件基礎(chǔ)上有嚴(yán)格的時(shí)序限制。

圖1:語(yǔ)音引擎時(shí)序圖

責(zé)任編輯:gt

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • dsp
    dsp
    +關(guān)注

    關(guān)注

    552

    文章

    7959

    瀏覽量

    347927
  • 調(diào)制解調(diào)器

    關(guān)注

    3

    文章

    847

    瀏覽量

    38744
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    新能源銅排焊接需注意事項(xiàng)與應(yīng)用領(lǐng)域

    ` 本帖最后由 一只耳朵怪 于 2018-6-19 09:46 編輯 新能源銅排焊接需注意事項(xiàng)與應(yīng)用領(lǐng)域【雅杰,顧小霞***】工藝:銅箔焊接、專(zhuān)業(yè)模具定型處理。選用先進(jìn)焊接技能,焊點(diǎn)結(jié)實(shí),不易
    發(fā)表于 06-16 10:51

    請(qǐng)問(wèn)stm32與DSP的SPI通信有什么注意事項(xiàng)嗎?

    求STM32與DSP的spi通信注意事項(xiàng)
    發(fā)表于 04-17 06:35

    PCB設(shè)計(jì)中疊層算阻抗時(shí)需注意哪些事項(xiàng)?

    PCB設(shè)計(jì)中疊層算阻抗時(shí)需注意哪些事項(xiàng)?
    發(fā)表于 05-16 11:06

    帶您了解顯示屏邊框加工所需注意事項(xiàng)

    LED邊框鋁型材成型是用來(lái)制作我們的LED邊框的一種材料,通常用于LED顯示屏。今天邁普光彩小編就來(lái)給大家講講顯示屏邊框加工所需注意事項(xiàng)。 1、檢查設(shè)備是否正常,機(jī)器各運(yùn)作件是否在原位,滑板的潤(rùn)滑
    發(fā)表于 07-17 17:40

    技術(shù)人員在FPGA設(shè)計(jì)時(shí)需注意什么事項(xiàng)?

    技術(shù)人員在FPGA設(shè)計(jì)時(shí)需注意什么事項(xiàng)?
    發(fā)表于 04-30 06:00

    DSP芯片應(yīng)用于哪些領(lǐng)域

    DSP芯片已經(jīng)廣泛應(yīng)用在信號(hào)處理、通信、雷達(dá)等許多領(lǐng)域:  (1) 信號(hào)處理--如數(shù)字濾波、自適應(yīng)濾波、快速傅里葉變換、相關(guān)運(yùn)算、頻譜分析、卷積等?! ?2) 通信--如調(diào)制解調(diào)器、自適應(yīng)均衡、數(shù)據(jù)
    發(fā)表于 06-18 16:36

    開(kāi)關(guān)電源PCB設(shè)計(jì)六大步驟所需注意事項(xiàng)進(jìn)行分析

    開(kāi)關(guān)電源PCB設(shè)計(jì)六大步驟在任何開(kāi)關(guān)電源設(shè)計(jì)中,PCB板的物理設(shè)計(jì)都是最后一個(gè)環(huán)節(jié),如果設(shè)計(jì)方法不當(dāng),PCB可能會(huì)輻射過(guò)多的電磁干擾,造成電源工作不穩(wěn)定,以下針對(duì)各個(gè)步驟中所需注意事項(xiàng)進(jìn)行分析。01原理圖到PCB的設(shè)計(jì)流程02相關(guān)參數(shù)設(shè)置相鄰導(dǎo)線(xiàn)間距必須能滿(mǎn)足電氣安全要
    發(fā)表于 12-28 08:28

    擦除FLASH零等待區(qū)期間需注意事項(xiàng)

    擦除FLASH零等待區(qū)期間需注意事項(xiàng)有零等待區(qū)的MCU 系列,在擦除零等待區(qū)時(shí)需注意事項(xiàng)?
    發(fā)表于 10-23 07:36

    標(biāo)準(zhǔn)電池使用注意事項(xiàng)

    標(biāo)準(zhǔn)電池使用注意事項(xiàng)   從標(biāo)準(zhǔn)電池的原理、結(jié)構(gòu)、特性可知,在使用標(biāo)準(zhǔn)電池時(shí)需注意以下五點(diǎn)。   ①標(biāo)準(zhǔn)電池不允許傾
    發(fā)表于 11-09 17:19 ?4408次閱讀

    自己動(dòng)手拆筆記本需注意的重要事項(xiàng)

    自己動(dòng)手拆筆記本需注意的重要事項(xiàng) 一、拆裝前注意事項(xiàng):   1、 拆卸前關(guān)閉電源,并拆去所有外
    發(fā)表于 01-23 13:59 ?983次閱讀

    基于DSP5402的語(yǔ)音處理系統(tǒng)

    本文提出了用DSP5402進(jìn)行語(yǔ)音處理的方法,詳細(xì)介紹了系統(tǒng)的軟硬件結(jié)構(gòu)與原理。該語(yǔ)音處理系統(tǒng)已安裝于某監(jiān)獄監(jiān)控系統(tǒng)中,實(shí)際運(yùn)行效果良好
    發(fā)表于 09-08 15:47 ?115次下載
    基于<b class='flag-5'>DSP</b>5402的<b class='flag-5'>語(yǔ)音</b><b class='flag-5'>處理</b>系統(tǒng)

    電子元件焊接注意事項(xiàng)

    焊接是電子元件組裝過(guò)程中的一項(xiàng)重要工藝,甚至焊接質(zhì)量的好壞直接影響電子元器件工作性能。而一個(gè)不良的焊點(diǎn)都會(huì)影響整個(gè)產(chǎn)品的可靠性,那么在電子元器件焊接有什么需注意事項(xiàng)呢?這里小編列舉了一些電子元器件焊接注意事項(xiàng),供大家參考。
    的頭像 發(fā)表于 04-20 10:01 ?3.3w次閱讀

    集成PCB電路安裝與焊接時(shí)有哪些事項(xiàng)需注意

    根據(jù)SMT電子產(chǎn)品生產(chǎn)的性質(zhì)、生產(chǎn)pcba批量、設(shè)備條件等情況不同,集成PCB電路安裝與smt焊接時(shí)需注意事項(xiàng)有哪些?
    的頭像 發(fā)表于 02-24 11:02 ?3939次閱讀

    安裝電子元器件時(shí)需注意事項(xiàng)

    任何電子設(shè)備都離不開(kāi)電子元器件的安裝。對(duì)于初學(xué)者來(lái)說(shuō),掌握電子元器件的安裝方法有著重要的意義。本文主要介紹安裝電子元器件時(shí)需注意事項(xiàng)。
    的頭像 發(fā)表于 05-01 16:11 ?7333次閱讀
    安裝電子元器件時(shí)<b class='flag-5'>需注意</b>的<b class='flag-5'>事項(xiàng)</b>

    使用復(fù)合機(jī)器人需要注意哪些事項(xiàng)?

    復(fù)合機(jī)器人在各領(lǐng)域得到廣泛應(yīng)用,具有高效、精準(zhǔn)、靈活等優(yōu)勢(shì)。使用時(shí)需注意安裝要求、使用注意事項(xiàng)和保養(yǎng)注意事項(xiàng)等方面,以確保安全有效地使用。
    的頭像 發(fā)表于 10-26 17:42 ?704次閱讀