概述音視頻通信的技術(shù)變革

導(dǎo)語(yǔ)

隨著5G和下一代編解碼、傳輸?shù)燃夹g(shù)持續(xù)演進(jìn)，音視頻通話技術(shù)從低延時(shí)到超低延時(shí)實(shí)時(shí)通信快速迭代，越來(lái)越多應(yīng)用與服務(wù)遷移至線上，越來(lái)越真實(shí)無(wú)損地還原線下體驗(yàn)，新的互動(dòng)方式和場(chǎng)景不斷涌現(xiàn)，從高度數(shù)字化到擬真化再到全真互聯(lián)網(wǎng)時(shí)代。本次LiveVideoStackCon 2021上海站我們邀請(qǐng)到了騰訊云副總裁李郁韜來(lái)分享音視頻的變革趨勢(shì)、演進(jìn)以及未來(lái)。

演講 / 李郁韜 大家好，我是騰訊云的李郁韜。作為L(zhǎng)VS的老朋友，回想起去年在電腦前用騰訊會(huì)議參加LVS線上圓桌討論，與大家分享“危機(jī)之下的音視頻技術(shù)驅(qū)動(dòng)產(chǎn)品創(chuàng)新”。很高興能再次與大家相聚在此，面對(duì)面地交流音視頻在后疫情時(shí)代的發(fā)展趨勢(shì)。 個(gè)人來(lái)講，我很感謝這個(gè)時(shí)代，在去年到今年這段困難時(shí)期，在座的音視頻行業(yè)從業(yè)者仍然能發(fā)揮技術(shù)力量，為社會(huì)創(chuàng)造價(jià)值。

本次分享內(nèi)容主要圍繞后疫情時(shí)代展開(kāi)，重點(diǎn)分享互聯(lián)網(wǎng)數(shù)字化場(chǎng)景應(yīng)用音視頻技術(shù)的新案例以及發(fā)展趨勢(shì)。 未來(lái)的互聯(lián)網(wǎng)是全真的，是線上線下結(jié)合的，是數(shù)字與實(shí)體相通的——這樣的互聯(lián)網(wǎng)時(shí)代被叫做全真互聯(lián)網(wǎng)時(shí)代。我們團(tuán)隊(duì)對(duì)全真互聯(lián)網(wǎng)是什么有很多的思考，總結(jié)來(lái)說(shuō)，首先它要有實(shí)時(shí)互動(dòng)的能力；其次它要有高清音視頻沉浸式體驗(yàn)；然后它要有無(wú)處不在的接入能力，例如APP、小程序、H5及硬件終端；最后它要有豐富的內(nèi)容制作能力，使全真互聯(lián)網(wǎng)時(shí)代充滿有意思、能消費(fèi)的內(nèi)容產(chǎn)品。

01疫后趨“視”，云上飛馳

三年前，騰訊合作伙伴大會(huì)做過(guò)預(yù)測(cè)，兩到三年后整個(gè)音視頻市場(chǎng)會(huì)以短視頻為主，直播與長(zhǎng)視頻為輔。2020年的市場(chǎng)中，短視頻和直播的活躍度明顯居于前列，短視頻用戶滲透率趨勢(shì)高達(dá)75%。可見(jiàn)短視頻已經(jīng)成為線上數(shù)字娛樂(lè)內(nèi)容消費(fèi)的主要載體。

除了市場(chǎng)的基本載體被短視頻、直播覆蓋以外，很多行業(yè)都出現(xiàn)了大變化。第一是直播領(lǐng)域，電商直播成為所有平臺(tái)的標(biāo)配。去年，在整個(gè)直播電商市場(chǎng)流量增加了8倍，預(yù)計(jì)2021年大盤將突破萬(wàn)億規(guī)模，相信在未來(lái)兩到三年仍然會(huì)呈高速增長(zhǎng)的趨勢(shì)。未來(lái)每一個(gè)直播平臺(tái)和企業(yè)都會(huì)擁有電商直播的渠道做數(shù)字化營(yíng)銷。

第二是教育場(chǎng)景，頭部的在線教育平臺(tái)運(yùn)用大量音視頻通信技術(shù)完成了各類生動(dòng)教學(xué)；許多機(jī)構(gòu)迫于疫情無(wú)法線下?tīng)I(yíng)業(yè)，也不得不選用SaaS工具，將線下教育場(chǎng)景搬至線上，大量OMO機(jī)會(huì)出現(xiàn)，去年市場(chǎng)的滲透率增長(zhǎng)很快，但總體還是處于較低水平。因此，我們預(yù)計(jì)教育場(chǎng)景在未來(lái)兩到三年還有很大空間可以挖掘。 第三是國(guó)內(nèi)企業(yè)直播以及多媒體服務(wù)。自從疫情后，每個(gè)企業(yè)都在思考如何在線上有更好的門戶、渠道、線上業(yè)務(wù)流程。

多媒體服務(wù)和承載能力成為必須面對(duì)的工作挑戰(zhàn)。從市場(chǎng)報(bào)告看，2020年企業(yè)直播的同比增速超過(guò)100%，預(yù)計(jì)2021年整個(gè)市場(chǎng)規(guī)模有望達(dá)到50億以上，并保持高速增長(zhǎng)。將來(lái)每家企業(yè)可能都會(huì)有專屬的直播頻道、視頻號(hào)、專屬短視頻媒體庫(kù)，而音視頻技術(shù)將會(huì)成為社會(huì)的基礎(chǔ)設(shè)施。

02線上數(shù)字生活進(jìn)一步媒體化

騰訊云所有產(chǎn)品線包括視頻云、云通信都會(huì)為線上數(shù)字化生活貢獻(xiàn)技術(shù)力量和B2B產(chǎn)品，使線上數(shù)字生活進(jìn)一步多媒體化。

2.1 直播帶貨新常態(tài)—技術(shù)驅(qū)動(dòng)電商直播，互動(dòng)體驗(yàn)極致優(yōu)化

關(guān)于直播電商，這里講一些不一樣的。大家也許都知道，所有APP做直播電商都需要SDK，要買CDN服務(wù)、點(diǎn)播服務(wù)。去年疫情時(shí)，很多傳統(tǒng)企業(yè)無(wú)法現(xiàn)做APP，這就導(dǎo)致它們需要選擇輕量化入口，快速開(kāi)發(fā)平臺(tái)支持電商直播轉(zhuǎn)型——小程序成為當(dāng)仁不讓的選擇。疫情期間騰訊云觀察到電商直播流量漲了4倍多，50多家各類企業(yè)或電商平臺(tái)都基于小程序做了電商直播。騰訊云將音視頻體驗(yàn)以及其通信能力做了包裝和輸出去承接這些需求。

2.2 全民電競(jìng)直播不斷挑戰(zhàn) 技術(shù)承載上線

每年的電競(jìng)直播都是對(duì)音視頻、流媒體行業(yè)巨大的技術(shù)挑戰(zhàn)?；谶^(guò)去三年的數(shù)據(jù)，每年LPL的決賽在線觀看的人數(shù)都有30%至40%增長(zhǎng)。在全球范圍內(nèi)，友商直播峰值1千多萬(wàn)同時(shí)在線來(lái)自印度板球的全民觀看。我們作為中國(guó)的企業(yè)，可以很自豪地說(shuō)每年支撐的電競(jìng)直播峰值早就突破2千萬(wàn)，這背后是大量CDN基礎(chǔ)設(shè)施保障以及降本增效關(guān)鍵技術(shù)的沉淀積累，包括騰訊云智能高清極速轉(zhuǎn)碼以及P2P降帶寬技術(shù)。

在每年盛事峰值突發(fā)的情況下，社會(huì)網(wǎng)絡(luò)帶寬都有極大節(jié)省。往年，大家只是在線上看直播，而去年我們通過(guò)一些技術(shù)手段與賽事主辦方、播放平臺(tái)方做了三方聯(lián)動(dòng)，將一鍵互動(dòng)能力植入了比賽過(guò)程中，使觀眾在看電競(jìng)直播畫(huà)面的同時(shí)，能夠?qū)崟r(shí)看見(jiàn)游戲進(jìn)程數(shù)據(jù)，同時(shí)還能跟現(xiàn)場(chǎng)解說(shuō)做實(shí)時(shí)互動(dòng)。以上嘗試點(diǎn)會(huì)在未來(lái)做進(jìn)一步挖掘與提煉，讓未來(lái)電競(jìng)比賽觀看的互動(dòng)性更強(qiáng)。

去年，電競(jìng)直播過(guò)程中需要做到精彩視頻的快速生成，且微博、抖音、快手等其他短視頻軟件都需要大量及時(shí)分發(fā)，現(xiàn)場(chǎng)的運(yùn)營(yíng)人員都可以通過(guò)云化在線編輯工具和在線實(shí)時(shí)生成工具將精彩集錦剪輯，分發(fā)至相應(yīng)平臺(tái)，形成傳播，吸引更多觀眾加入直播房間。 上述兩個(gè)特點(diǎn)都是從去年開(kāi)始大規(guī)模運(yùn)用，預(yù)計(jì)未來(lái)兩年將有更多的互動(dòng)、更快內(nèi)容的生成與分發(fā)會(huì)在電競(jìng)直播中進(jìn)一步拓展。

2.3 云游戲邁向全真互動(dòng)時(shí)代

接下來(lái)分享的是云游戲，相信大家都不陌生，這也是一個(gè)非常火、聊了兩年的話題。非常激動(dòng)的是從去年開(kāi)始，從騰訊云角度去看云游戲，它的發(fā)展速度是飛快的，遠(yuǎn)遠(yuǎn)超出了預(yù)期。中國(guó)整個(gè)網(wǎng)絡(luò)環(huán)境與網(wǎng)民終端能力，以及整個(gè)技術(shù)成熟度完全支持將大量端游和部分手游進(jìn)行云游化，騰訊云游戲提供的PaaS層可以方便地把一款端游、手游在云端進(jìn)行實(shí)例化，通過(guò)串流服務(wù)一起給到平臺(tái)方全套的SDK解決方案，使之實(shí)現(xiàn)云游戲的完整上架和接入。

最近發(fā)展較好的大平臺(tái)，包括斗魚(yú)、菜雞、YY都在云游戲上構(gòu)建了大量實(shí)例，嘗試與自己的直播做互動(dòng)。上圖中的案例是菜雞已經(jīng)在云游戲中做主播與觀眾的接力玩法，例如主播正在玩、所有人正在看的時(shí)候，玩家可以申請(qǐng)與主播一起玩，可以到云游戲房間解鎖主播控制權(quán)，甚至與主播在游戲中PK。

其他觀眾可以觀賞他們的游戲過(guò)程。整個(gè)過(guò)程的互動(dòng)性得到了極大的增強(qiáng)。很多Party類、養(yǎng)成類游戲都非常適合此類玩法。它背后依托的是方便接入、低成本、穩(wěn)定的云游戲PaaS層，在上面做二次分裝就可以方便地實(shí)現(xiàn)云游的解決方案。

2.4 在線K歌/語(yǔ)言聊天室，走向高清實(shí)時(shí)

在線娛樂(lè)類比較多的場(chǎng)景是語(yǔ)音聊天室和在線K歌。大家都關(guān)注到前段時(shí)間北美的Clubhouse比較火，它運(yùn)用到的技術(shù)大家也都不會(huì)陌生，很多語(yǔ)音聊天應(yīng)用早已經(jīng)這樣做了。在線K歌場(chǎng)景從以前的合唱接龍方式到現(xiàn)如今可以實(shí)現(xiàn)多人真實(shí)實(shí)時(shí)合唱。通過(guò)一些測(cè)試和對(duì)比，時(shí)延已經(jīng)達(dá)到70毫秒以內(nèi)，在不久的將來(lái)，大家就可以在全民K歌APP中體驗(yàn)到全實(shí)時(shí)合唱能力了。它背后依賴的是RTC技術(shù)的極致優(yōu)化和全球各運(yùn)營(yíng)商部署節(jié)點(diǎn)的能力，以及業(yè)務(wù)上配合集成的工作，未來(lái)語(yǔ)音聊天和K歌場(chǎng)景會(huì)往全實(shí)時(shí)、更高清的方向發(fā)展。

03內(nèi)容生產(chǎn)：云化的多媒體生產(chǎn)工具

將進(jìn)一步提升全真互聯(lián)網(wǎng)的內(nèi)容供給

接下來(lái)我想與大家分享內(nèi)容生產(chǎn)制作。在線制作數(shù)字化進(jìn)程加速，每天消費(fèi)內(nèi)容需求量不斷增加，對(duì)內(nèi)容生產(chǎn)方挑戰(zhàn)很大，之前MCN的編輯一人需要花很長(zhǎng)一段時(shí)間去創(chuàng)作，同時(shí)需要很多人幫他審核、后期制作以及分發(fā)上傳到相應(yīng)的視頻平臺(tái)。隨著云化進(jìn)程和多媒體云端處理能力的加速，未來(lái)工作都會(huì)移至云端實(shí)現(xiàn)，以真正變成全真互聯(lián)網(wǎng)的內(nèi)容供給。

3.1 內(nèi)容消費(fèi)成為行業(yè)主流，編輯的內(nèi)容生產(chǎn)工具成為剛需

從市場(chǎng)規(guī)模來(lái)看，2020年MCN市場(chǎng)規(guī)模達(dá)245億元，數(shù)量達(dá)28000家，平均同比增速大于100%。內(nèi)容消費(fèi)端，網(wǎng)絡(luò)廣告市場(chǎng)規(guī)模超萬(wàn)億，企業(yè)及廣告主更愿意為內(nèi)容營(yíng)銷付費(fèi)買單，未來(lái)在數(shù)字化營(yíng)銷以及內(nèi)容分發(fā)和消費(fèi)上，內(nèi)容生產(chǎn)是必須解決的問(wèn)題。

3.2 效率問(wèn)題——云創(chuàng)多媒體引擎

首先是效率問(wèn)題，騰訊在這一方面做了兩年多云剪，云導(dǎo)播產(chǎn)品。打開(kāi)騰訊制作云，選擇云轉(zhuǎn)推，添加輸出地址，可以選擇視頻號(hào)等多個(gè)第三方平臺(tái)，填寫(xiě)推流地址，立即轉(zhuǎn)推，即完成多平臺(tái)同步直播。視頻內(nèi)容往往涉及多人協(xié)作，成員A進(jìn)行素材拍攝并上傳至云媒資，成員B在后臺(tái)進(jìn)行素材審核、分類、打標(biāo)簽等操作，這里準(zhǔn)備了海量的視頻模板，成員C可以使用模板快速制作成視頻內(nèi)容，點(diǎn)擊導(dǎo)出完成創(chuàng)作。騰訊制作云支持將視頻一鍵上傳至快手、微博、企鵝號(hào)。

今年我們已經(jīng)將整個(gè)產(chǎn)品線升級(jí)成云創(chuàng)多媒體引擎。其實(shí)我們不是一個(gè)視頻平臺(tái)方，不做內(nèi)容生產(chǎn)、內(nèi)容分發(fā)，但我們希望通過(guò)我們的技術(shù)能力、通過(guò)云化的服務(wù)使視頻開(kāi)發(fā)者和企業(yè)主具備生產(chǎn)工具的能力。所以我們將軟件升級(jí)成云創(chuàng)多媒體引擎，希望以引擎的方式被集成至大家的生產(chǎn)系統(tǒng)，使之具備云化剪輯、云化導(dǎo)播以及云端的媒體管理能力，同時(shí)在全流程的生產(chǎn)協(xié)作上提供必要的接口，以提供云化生產(chǎn)制作的全流程。

整個(gè)云創(chuàng)多媒體引擎特性可以用三個(gè)維度闡釋。首先是它可以解決生產(chǎn)規(guī)模化的問(wèn)題，以前的生產(chǎn)都需要幾個(gè)人像生產(chǎn)流水線一樣人工操作，隨著云化生產(chǎn)工具進(jìn)一步發(fā)展，未來(lái)可以有大量云端素材庫(kù)、模板庫(kù)幫助活動(dòng)運(yùn)營(yíng)內(nèi)容制作商在節(jié)假日、慶?；顒?dòng)快速通過(guò)模板素材生成一系列短視頻。

今年春節(jié)期間，我們有幸服務(wù)到好幾家小程序客戶，它們用微剪工具做了少兒春晚推廣，效果非常好。我們提供的是小程序音視頻剪輯的插件，被植入到小程序中，再做線上的推廣，給用戶提供線上視頻制作，再二次分發(fā)與裂變。其次是生產(chǎn)協(xié)同化，在線的多媒體制作本質(zhì)來(lái)講是辦公協(xié)同場(chǎng)景。我們將所有流水線上的操作都搬至云上，將一體化更智能的能力賦能給這些人。

傳統(tǒng)模式下要做較好的短視頻需要兩天人工，到云創(chuàng)時(shí)代，預(yù)計(jì)整個(gè)過(guò)程縮短至30分鐘以內(nèi)。最后是一鍵多平臺(tái)直播，作為工具的平臺(tái)方，要幫助做好一鍵多平臺(tái)的能力，方便用戶對(duì)接到新的視頻平臺(tái)和傳播渠道上。類似微信視頻號(hào)這樣新興發(fā)展起來(lái)的視頻平臺(tái)也可以由我們一鍵轉(zhuǎn)發(fā)。

最后是云創(chuàng)多媒體引擎被另外接入的方式，除了提供SaaS級(jí)別的0開(kāi)發(fā)、即買即用方式之外，我們也提供更改域名、更改LOGO定制化的能力和配置，除此之外還提供一系列的API，包括前端Iframe集成，后端一些列視頻接口和批量處理接口，用戶能夠非常容易、方便地接入集成至已有的生產(chǎn)系統(tǒng)中。在這個(gè)Case下，B站已經(jīng)用這個(gè)引擎做了面向運(yùn)營(yíng)人員的工具，圖中看不出是騰訊云提供的，也是希望賦能給各行各業(yè)，讓大家都擁有云化多媒體生產(chǎn)能力。

04傳統(tǒng)行業(yè)：音視頻通信云成了各產(chǎn)業(yè)

升級(jí)到全真交互時(shí)代無(wú)可替代的工具

后疫情時(shí)代，很多的工作已經(jīng)被疫情改變。拿我自己來(lái)說(shuō)，每天的會(huì)議，包括招聘的面試都在用騰訊會(huì)議進(jìn)行，這在兩年前是不可想象的。傳統(tǒng)的各行各業(yè)也將線下業(yè)務(wù)搬至線上，且已經(jīng)回不到之前的狀態(tài)了。

4.1 教育行業(yè)：1V1、小班課、大班課等 各類在線教育高速發(fā)展

現(xiàn)在的在線教育發(fā)展已經(jīng)有了用戶習(xí)慣的基礎(chǔ)，市場(chǎng)上發(fā)展火熱的教育場(chǎng)景在騰訊云解決方案中有了豐富全面的覆蓋。這里值得注意的是騰訊云低延時(shí)的產(chǎn)品，它可以非常方便地將大班課CDN相對(duì)高時(shí)延的服務(wù)快速切換至低時(shí)延RTC服務(wù)。

騰訊云提供的小程序音視頻的能力，能方便在線教育創(chuàng)業(yè)者在小程序上快速試錯(cuò)，測(cè)試用戶接受之后再導(dǎo)流到APP中，中間買量和運(yùn)營(yíng)成本也將急劇下降。在RTC競(jìng)爭(zhēng)十分激烈的市場(chǎng)上，相信其他功能每家提供的解決方案趨同，大趨勢(shì)是幾乎所有在線教育平臺(tái)都會(huì)選擇多云方案，集成多家RTC的SDK，形成質(zhì)量保障。

4.2 金融/證券直播：輕量便捷的小程序金融/證券直播更受歡迎

金融領(lǐng)域在這一年內(nèi)發(fā)展非?？臁Ｒ咔槠陂g受影響最大的，首當(dāng)其沖的是基金銷售領(lǐng)域。過(guò)去的模式是基金經(jīng)理每過(guò)一段時(shí)間就需要在線下辦沙龍和會(huì)議銷售基金產(chǎn)品。大量基金經(jīng)理在沒(méi)有辦法線下開(kāi)展時(shí)，都選擇用了小程序工具線上完成基金宣傳和售賣活動(dòng)，效果非常好。

據(jù)平臺(tái)觀察，去年典型的基金經(jīng)理可以做幾十場(chǎng)直播活動(dòng)，相對(duì)以前場(chǎng)次是20多倍的提升，每場(chǎng)參與人數(shù)從100至1000不等。全年累加，好的基金經(jīng)理可以吸引幾十萬(wàn)人的觀眾和潛在客戶。典型的工行、招行客戶明星產(chǎn)品非常多。去年股市非?；穑鸶?。雙重因素刺激下，小程序基金直播非常值得期待。

4.3 銀行業(yè)：基于互動(dòng)視頻的無(wú)界銀行，提升后疫情時(shí)代銀行業(yè)務(wù)效益

很多線下傳統(tǒng)的金融流程完整搬至線上。比較典型的是騰訊云的合作伙伴飛虎互動(dòng)，用了半年多的時(shí)間將多家銀行的開(kāi)戶流程搬至線上，以虛擬營(yíng)業(yè)廳的方式使不能出家門的客戶有了開(kāi)戶體驗(yàn)。相信未來(lái)這種場(chǎng)景會(huì)繼續(xù)滲透進(jìn)大家生活的方方面面。

4.4 云上展會(huì)成為新常態(tài)

去年云上廣交會(huì)，騰訊從接到任務(wù)、線上投產(chǎn)到順利結(jié)束，整個(gè)周期不到3個(gè)月，可以想象在四五年前，音視頻技術(shù)還沒(méi)有這么發(fā)達(dá)的時(shí)候，這個(gè)項(xiàng)目也根本不可能做得了。去年因?yàn)橛辛吮容^成熟的云化方案，以及音視頻技術(shù)的積累，可以通過(guò)包括騰訊會(huì)議、TRTC的SDK整套綜合解決方案來(lái)快速支持廣交會(huì)的商戶在云端構(gòu)建每個(gè)商戶的線上店鋪，用音視頻讓全球買家與賣家做生意，這是非常大趨勢(shì)改變，相信在未來(lái)全球疫情沒(méi)有得到很好改變時(shí)候，線上展會(huì)、與國(guó)外做生意的大型企業(yè)的直播都會(huì)非常依賴音視頻與云的技術(shù)。

4.5 沉浸式內(nèi)容+TRTC帶看+多觸點(diǎn)呼叫中心，構(gòu)建全真營(yíng)銷能力

在去年疫情期間，騰訊云與貝殼如視一起合作了VR帶看的場(chǎng)景。如果有租房買房的同學(xué)用過(guò)貝殼的話，都能感受到沉浸式的看房體驗(yàn)，隨時(shí)隨地可以發(fā)起與經(jīng)紀(jì)人的聯(lián)系，能夠極大詮釋看房的全真互聯(lián)網(wǎng)時(shí)代。接下去還會(huì)有看車，看博物館的展覽，這些都會(huì)加入沉浸式與帶看的體驗(yàn)。除了移動(dòng)端的小程序與APP，我們還推出了TCCC云化呼叫中心產(chǎn)品，它完全基于TRTC去實(shí)現(xiàn)純Web全座席端的呼叫產(chǎn)品，可以通過(guò)被集成的方式提供到現(xiàn)有的工單系統(tǒng)、CRM系統(tǒng)中，實(shí)現(xiàn)軟件化和多觸點(diǎn)通信能力。

05開(kāi)發(fā)者有了更多的音視頻技術(shù)棧的選擇

這一部分介紹一些新的技術(shù)趨勢(shì)，以方便大家選擇自己的技術(shù)棧。 5.1 云原生低碼aPaaS涌現(xiàn)

云原生是一個(gè)大趨勢(shì)。云原生可以理解為容器和音視頻結(jié)合，這里邊有非常多的想象空間和可行性。以前要做RTC服務(wù)或直播服務(wù)，除了購(gòu)買RTC供應(yīng)商的服務(wù)或CDN之外，還要自己搭建媒體源站和錄制服務(wù)，以方便做業(yè)務(wù)邏輯的分裝。 現(xiàn)如今云原生時(shí)代，可以通過(guò)Serverless，無(wú)需購(gòu)買搭建服務(wù)，通過(guò)函數(shù)服務(wù)在幾行代碼中調(diào)用Rest API實(shí)現(xiàn)之前繁瑣的過(guò)程。

其帶來(lái)的好處顯而易見(jiàn)：彈性伸縮，按量使用，按需付費(fèi)，同時(shí)可以快速啟動(dòng)，無(wú)需管理大服務(wù)器的集群，所有的組件都是無(wú)服務(wù)器化的，無(wú)需運(yùn)維，節(jié)省人力成本。

上圖中的兩個(gè)例子，其中一個(gè)，以前要做視頻文件轉(zhuǎn)直播流往往需要文件解析的源站，調(diào)用FFmpeg做轉(zhuǎn)推服務(wù)至直播平臺(tái)，現(xiàn)如今可以使用Serverless運(yùn)行服務(wù)端的SDK解決這些問(wèn)題；

另一個(gè)例子，在線教育用的是全景錄制，它的意思是作為學(xué)生參與課堂所看見(jiàn)的所有內(nèi)容互動(dòng)、PPT和老師的小窗口都需要原封不動(dòng)地錄制下來(lái)，這給服務(wù)端帶來(lái)了很大的技術(shù)挑戰(zhàn)，實(shí)驗(yàn)起來(lái)很麻煩?，F(xiàn)在通過(guò)Serverless技術(shù)可以在云端構(gòu)建仿終端的實(shí)例，在Serverless組織下做到完全還原錄制。

5.2 All in One 音視頻終端引擎

騰訊有直播推流的SDK、TRTC互動(dòng)音視頻的SDK、IM即時(shí)通信的SDK。在去年年底我們將這些都做了一定程度的統(tǒng)一，用同樣的接口風(fēng)格、同樣的格式和接入方式提供給開(kāi)發(fā)者All in One一站式的音視頻終端引擎。未來(lái)我們會(huì)更多投入到音視頻終端引擎的開(kāi)發(fā)中，包括前端埋點(diǎn)的上報(bào)、全鏈路的監(jiān)控和日志的排查等，把整體解決方案提供給開(kāi)發(fā)者。相信未來(lái)在兼入到騰訊云終端SDK后，只需要在控制臺(tái)點(diǎn)選所需要的協(xié)議和需要的延時(shí)大小等個(gè)性化參數(shù)，就可以方便地得到想要的SDK形態(tài)。

5.3 下一代全球?qū)崟r(shí)傳輸網(wǎng)絡(luò) 助力開(kāi)發(fā)者在全球快速上線業(yè)務(wù)

上圖是全球的基礎(chǔ)設(shè)施。從去年開(kāi)始，基建就面臨著不小的挑戰(zhàn)，包括疫情重點(diǎn)地區(qū)巴西、印度等建設(shè)進(jìn)度嚴(yán)重受阻，通過(guò)不懈努力，以及與合作伙伴的通力合作，現(xiàn)如今騰訊云全球節(jié)點(diǎn)已超過(guò)2100 個(gè)，可以容納120T的帶寬儲(chǔ)備應(yīng)對(duì)突發(fā)情況。包括騰訊會(huì)議海外版、TRTC海外版、IM海外版都已經(jīng)全面支持GDPR的要求，全面支持主流大洲國(guó)家覆蓋。所以在選擇出海業(yè)務(wù)時(shí)，騰訊云是一個(gè)比較好的全家桶選擇。

5.4 騰訊云音視頻通信

未來(lái)兩年，我們?nèi)詴?huì)圍繞應(yīng)用場(chǎng)景、基礎(chǔ)設(shè)施、PaaS層三個(gè)方向發(fā)展。目前正式推出統(tǒng)一的基礎(chǔ)網(wǎng)絡(luò)與RT-ONE音視頻通信技術(shù)網(wǎng)絡(luò)，旗下有實(shí)時(shí)音視頻通信網(wǎng)絡(luò)去解決音視頻實(shí)時(shí)通信的問(wèn)題、有即時(shí)通信網(wǎng)絡(luò)去解決IM消息和業(yè)務(wù)信令的問(wèn)題、有流媒體分發(fā)網(wǎng)絡(luò)去解決海量大并發(fā)直點(diǎn)播CDN的問(wèn)題。

在此之上，我們構(gòu)建的All in One SDK音視頻引擎以及云創(chuàng)多媒體生產(chǎn)制作的引擎一起構(gòu)建出了PaaS與aPaaS的產(chǎn)品家族。再往上，我們會(huì)供給給各領(lǐng)域的場(chǎng)景，例如在線教育場(chǎng)景、會(huì)議場(chǎng)景、客服場(chǎng)景、泛娛樂(lè)場(chǎng)景、金融場(chǎng)景等等，我們都會(huì)與合作伙伴推出整體解決方案。

5.5 騰訊云音視頻通信開(kāi)發(fā)者資源

上圖是對(duì)開(kāi)發(fā)者的貢獻(xiàn)，去年API個(gè)數(shù)超過(guò)300+，其開(kāi)發(fā)速度滿足了各行各業(yè)從業(yè)者的要求，全年迭代150+版本，整個(gè)過(guò)程中沒(méi)有一例重大事故；文檔突破2500+，大家在騰訊云上搜索相關(guān)產(chǎn)品都能獲得全面的文檔解釋；SDK覆蓋了所有的終端，aPaaS方案仍在向上疊加，現(xiàn)如今是10個(gè)，相信再過(guò)一年是20個(gè)，30個(gè)……未來(lái)各行各業(yè)的解決方案都會(huì)呈現(xiàn)在產(chǎn)品庫(kù)中，而且所有產(chǎn)品都標(biāo)配了私有化部署的能力。在開(kāi)源社區(qū)方面，我們也持續(xù)積極投入，現(xiàn)在有13個(gè)開(kāi)源項(xiàng)目面向開(kāi)發(fā)者，每年會(huì)有100+場(chǎng)活動(dòng)與大家共同交流。

06未來(lái)技術(shù)趨勢(shì)洞見(jiàn)

接下來(lái)聊一下對(duì)未來(lái)趨勢(shì)的看法。

6.1 音頻-弱網(wǎng)下的音頻QoE越來(lái)越重要

在音頻處理方面，騰訊的多媒體實(shí)驗(yàn)室和天籟實(shí)驗(yàn)室投入了很多精力和人力去做3A的處理優(yōu)化，力求將其做到極致。推出的cPLC連續(xù)突發(fā)丟包補(bǔ)償方案和cFEC前向糾錯(cuò)編碼方案在騰訊會(huì)議中也得到了非常多的應(yīng)用。

6.2 視頻向超高清演進(jìn)

現(xiàn)在我們看見(jiàn)的主流短視頻很多是通過(guò)軟件編解碼方式來(lái)做的。未來(lái)隨著云游戲、視頻直播的發(fā)展，EGL編解碼器逐漸替代X86軟件編碼器，騰訊工程師研發(fā)的H.265硬件編碼器瑤池V500也在路上了，相信會(huì)很快投產(chǎn)。

6.3 各式流媒體協(xié)議滿足不同業(yè)務(wù)場(chǎng)景

緊接著我想分析一些趨勢(shì)。流媒體的協(xié)議格式發(fā)展速度很快，全球范圍上看，所有格式都在其應(yīng)用場(chǎng)景上發(fā)揮著自身的價(jià)值，本次我想重點(diǎn)挑幾個(gè)介紹。SRT以前是傳統(tǒng)廣電直播領(lǐng)域解決上行直播問(wèn)題的協(xié)議，現(xiàn)在我們將它用在了電競(jìng)直播遠(yuǎn)程技術(shù)中心高碼率傳輸?shù)倪^(guò)程中，能夠極大地解決以前靠專線和衛(wèi)星傳輸帶來(lái)的成本消耗問(wèn)題，同時(shí)帶來(lái)了不錯(cuò)的質(zhì)量；

WebRTC方面，我們投入了非常多的精力去做社區(qū)貢獻(xiàn)，調(diào)整其QoS、QoE，將秒開(kāi)和卡頓做到極致?；隍v訊自身的RTC，我們還將WebRTC作為接入端，實(shí)現(xiàn)多端互通，包括小程序；還要提一下QUIC，它是標(biāo)準(zhǔn)傳輸協(xié)議，在海外很多場(chǎng)景下，用QUIC做CDN的最后一公里加速非常不錯(cuò)。如果接入到騰訊云CDN，就可以天然享受到QUIC協(xié)議。

6.4 下一代編碼標(biāo)準(zhǔn)工程化加速

關(guān)于下一代的編碼標(biāo)準(zhǔn)，AV1在海外已經(jīng)大規(guī)模使用，國(guó)內(nèi)長(zhǎng)視頻平臺(tái)也已經(jīng)開(kāi)始使用AV1。騰訊云在2019年11月開(kāi)始從云直播、云點(diǎn)播全線產(chǎn)品支持AV1的轉(zhuǎn)碼服務(wù)，同時(shí)也是AOM的第一家中國(guó)公司董事會(huì)成員。在AV2上，我們也參與了提案，相信在2022年會(huì)有定稿部分。騰訊多媒體實(shí)驗(yàn)室擔(dān)任了VVC的聯(lián)合主編，參與了許多提案。騰訊多媒體實(shí)驗(yàn)室、視頻云室聯(lián)合騰訊內(nèi)部多部門共同研發(fā)H.266/VVC編解碼器，很多產(chǎn)品都已經(jīng)得到了客戶的驗(yàn)證，最近我們?cè)诳紤]是否需要更好地與FFmpeg做結(jié)合并將其推出給開(kāi)發(fā)者。 6.5 開(kāi)源的思考

騰訊的音視頻團(tuán)隊(duì)一直在積極擁抱開(kāi)源社區(qū)，在開(kāi)源技術(shù)的基礎(chǔ)上經(jīng)過(guò)加工，有了一些好的特性我們都會(huì)積極回饋至社區(qū)。拿FFmpeg為例，騰訊在2019~2020期間向社區(qū)提交的Patch數(shù)目 》 330個(gè)，被merge的Patch 》 180 個(gè)，是社區(qū)前10 的貢獻(xiàn)者。相信未來(lái)在VMAF、SRT、WebRTC上也會(huì)有更多的貢獻(xiàn)，希望能營(yíng)造雙向循環(huán)的生態(tài)，從云計(jì)算從開(kāi)源社區(qū)拿到的好東西最終能以云服務(wù)的方式提供給開(kāi)發(fā)者，同時(shí)將開(kāi)發(fā)者反饋的問(wèn)題回饋給開(kāi)源社區(qū)，讓其他的云計(jì)算公司和開(kāi)發(fā)者可以直接從開(kāi)源社區(qū)拿到不錯(cuò)地版本去構(gòu)建自己的服務(wù)。

07騰訊云V加俱樂(lè)部

最后想要聊生態(tài)合作的部分。騰訊云去年成立了面向音視頻行業(yè)的V加俱樂(lè)部，并啟動(dòng)了招募活動(dòng)。

已經(jīng)有非常多的伙伴加入到我們的V加俱樂(lè)部，一年收入已超過(guò)一個(gè)億，發(fā)展空間非常巨大，相信未來(lái)我們還是需要和音視頻開(kāi)發(fā)者生態(tài)合作去服務(wù)客戶。V加俱樂(lè)部的基本思路是提供PaaS層和aPaaS層產(chǎn)品能力與ISV做某個(gè)行業(yè)的定制開(kāi)發(fā)，繼而形成聯(lián)合產(chǎn)品，借由騰訊的千帆計(jì)劃和云市場(chǎng)推出給騰訊云客戶以及ISV自身的客戶，使之了解兩者聯(lián)合產(chǎn)品的特殊價(jià)值。

其次，我們用技術(shù)生態(tài)合作去解決騰訊云很多客戶的定制開(kāi)發(fā)問(wèn)題，讓合作商進(jìn)入項(xiàng)目中做技術(shù)開(kāi)發(fā)工作。然后是我們對(duì)商機(jī)的開(kāi)放，將我們拿到的不能解決需求的商機(jī)貢獻(xiàn)給V加俱樂(lè)部成員，大家共同服務(wù)好客戶。

除此之外，今天還想面向開(kāi)發(fā)者宣布一個(gè)消息，在演講前一天，騰訊云官網(wǎng)就已經(jīng)上線了面向開(kāi)發(fā)者的創(chuàng)新成長(zhǎng)快線，希望能夠讓大家有更多的免費(fèi)資源，享受到視頻通信產(chǎn)品服務(wù)。TRTC會(huì)提供給符合標(biāo)準(zhǔn)的開(kāi)發(fā)者100萬(wàn)分鐘的免費(fèi)時(shí)長(zhǎng)，同時(shí)還有騰訊云專家團(tuán)隊(duì)的技術(shù)支持，最高享有10萬(wàn)元云產(chǎn)品代金券，詳細(xì)活動(dòng)以騰訊云官網(wǎng)介紹為主。

編輯：jq