TCL發(fā)布7項(xiàng)AI項(xiàng)目，覆蓋視頻、語音處理和多模態(tài)等領(lǐng)域

2019 年 6 月 14 日，TCL 舉辦了以“技術(shù)無疆界，合作贏未來”為主題的技術(shù)合作開放大會(huì)。會(huì)上，TCL 面向全球發(fā)布了 13 項(xiàng)技術(shù)合作項(xiàng)目，其中包括 7 項(xiàng)人工智能技術(shù)項(xiàng)目。此外，大會(huì)當(dāng)天 TCL 還宣布已聘請 29 名業(yè)界一流技術(shù)專家為技術(shù)顧問，幫助 TCL 開拓技術(shù)戰(zhàn)略視野，洞察前沿技術(shù)趨勢，提升技術(shù)創(chuàng)新能力，其中包括 CSDN 創(chuàng)始人&董事長，極客幫創(chuàng)投創(chuàng)始合伙人蔣濤。

發(fā)布7項(xiàng)AI項(xiàng)目，覆蓋視頻、語音處理和多模態(tài)等領(lǐng)域

談到 TCL，大多數(shù)人的第一反應(yīng)可能還是這家公司的電視或手機(jī)等產(chǎn)品，然而，在技術(shù)創(chuàng)新的驅(qū)動(dòng)下，這家全球化的老牌企業(yè)已緊跟潮流，與當(dāng)下發(fā)展最為迅猛地技術(shù)——人工智能緊密結(jié)合，定位已悄然變成一家全球化的智能產(chǎn)品制造及互聯(lián)網(wǎng)應(yīng)用服務(wù)企業(yè)集團(tuán)。TCL 在美國、波蘭、香港、西安、武漢和深圳等地設(shè)立的研發(fā)中心，早已將圖像處理、語音處理等技術(shù)應(yīng)用于手機(jī)、電視等產(chǎn)品中。

這次，TCL 在近日舉行的技術(shù)合作開放大會(huì)上，將 AI技術(shù)的布局再次擴(kuò)大， 面向全球發(fā)布了 13 個(gè)技術(shù)合作項(xiàng)目，其中就包括 7 項(xiàng)人工智能技術(shù)，另外 6 項(xiàng)為新型顯示技術(shù)。本文將重點(diǎn)介紹 AI 相關(guān)技術(shù)項(xiàng)目。

這 7 項(xiàng) AI 項(xiàng)目覆蓋圖像、視頻和語音處理、多模態(tài)等領(lǐng)域，具體詳情如下：

視頻處理類AI-IP

背景與需求：4K、8K屏技術(shù)已經(jīng)成熟，目前4K、8K片源少，VOD視頻流傳輸帶寬也不足等；需要開發(fā)高性能圖像處理IP。

研究內(nèi)容：開發(fā)一種AI加速架構(gòu)，支持4K/8K,最大120Hz視頻處理；支持功能：超分/插幀/視頻解碼等人工智能算法；解決DDR和計(jì)算之間的瓶頸，解決大算力下，芯片功耗大的問題。

端到端的神經(jīng)網(wǎng)絡(luò)視頻編解碼框架及實(shí)現(xiàn)

背景與需求：視頻壓縮方法（H.265）有專利收費(fèi)問題，4K/8K內(nèi)容的出現(xiàn)，帶寬需要大幅度提升。基于深度學(xué)習(xí)的端到端視頻編解碼框架，具有強(qiáng)大的視頻壓縮能力；需要開發(fā)AI編解碼算法。

研究內(nèi)容：計(jì)完整的視頻編解碼框架：實(shí)現(xiàn)關(guān)鍵幀的壓縮算法；實(shí)現(xiàn)運(yùn)動(dòng)估計(jì)及非關(guān)鍵幀的壓縮；實(shí)現(xiàn)視頻解碼后處理，對解碼視頻進(jìn)行增強(qiáng)。

內(nèi)存計(jì)算研究(模擬計(jì)算或者圍繞新型存儲(chǔ)計(jì)算)

背景與需求：AI視頻處理：最大的挑戰(zhàn)是算力要求高，芯片面積大，功耗大。馮諾伊曼架構(gòu)（存儲(chǔ)和計(jì)算分離），面臨瓶頸；需要研究新型的AI加速結(jié)構(gòu)。

研究內(nèi)容：圍繞IC新工藝（例如MRAM,RRAM等工藝），探索存算一體，模擬計(jì)算等技術(shù)，提高模擬計(jì)算的精度，算力和功耗等問題，以達(dá)到應(yīng)用水平；積極探索適合于內(nèi)存計(jì)算的新架構(gòu)。

圖像處理類AI算法的加速方法

背景與需求：8K/120Hz顯示器件的出現(xiàn)，圖像處理芯片面臨很大的挑戰(zhàn)（算力，功耗和面積）；探索新的算法結(jié)構(gòu)和加速計(jì)算方法。

研究內(nèi)容：針對視頻超分，視頻插幀類算法，從算法模型和AI硬件架構(gòu)方面，探索新的加速運(yùn)算方法：輕量化的AI算法模型設(shè)計(jì)；利用圖像空間相關(guān)性，進(jìn)行智能快速計(jì)算的方法等。

語言：生成式閑聊（NLP）

背景與需求：目前閑聊系統(tǒng)，大多是用海量語料對，對seq2seq網(wǎng)絡(luò)進(jìn)行訓(xùn)練而成，此類系統(tǒng)對話水平和真人對話相去甚遠(yuǎn)；開發(fā)具備有主題/前后文關(guān)聯(lián)及回憶能力的對話系統(tǒng)。

研究內(nèi)容：能記憶和理解用戶聊天內(nèi)容和過程的對話機(jī)器人，在對話過程中，能體現(xiàn)上下文，并可以自由轉(zhuǎn)換話題；對話范圍：家電領(lǐng)域使用

面向用戶審美的圖像評價(jià)數(shù)據(jù)庫

圖片的審美評價(jià)是一個(gè)重要指標(biāo)；我們需要建立一個(gè)主觀評價(jià)數(shù)據(jù)庫，訓(xùn)練一個(gè)機(jī)器自主評價(jià)的系統(tǒng)。

開發(fā)無參考圖像評價(jià)數(shù)據(jù)庫框架和采集方案；設(shè)計(jì)深度學(xué)習(xí)算法模型學(xué)習(xí)用戶審美趨勢；設(shè)計(jì)并開發(fā)圖像評價(jià)軟件管理系統(tǒng)。

電視/物聯(lián)網(wǎng)設(shè)備多模態(tài)交互研究

背景與需求：目前電視逐步具有聽/說/看以及接入其他物聯(lián)網(wǎng)設(shè)備的能力，但是交互方式單一；構(gòu)建多模態(tài)交互系統(tǒng)。

研究內(nèi)容：攝像頭：分析用戶的行為：肢體，表情等；Mic：分析聲紋，韻律，情緒等；手機(jī)等其他用戶行為數(shù)據(jù)；其他可能的傳感器數(shù)據(jù)；綜合各種數(shù)據(jù)，開發(fā)各種自然的交互場景。

量子點(diǎn)材料智能合成系統(tǒng)

背景與需求：QLED材料離產(chǎn)業(yè)化還有一定的距離（發(fā)光效率和壽命），材料合成試驗(yàn)費(fèi)時(shí)費(fèi)力；開發(fā)一種自動(dòng)化材料合成試驗(yàn)系統(tǒng)。

研究內(nèi)容：搭建微流控反應(yīng)系統(tǒng)（合成材料）；搭建強(qiáng)化學(xué)習(xí)網(wǎng)絡(luò)，為合成高性能新材料探索最優(yōu)實(shí)驗(yàn)路徑，獲得理想材料合成參數(shù)。

在人工智能技術(shù)領(lǐng)域，TCL 早已有所布局，分別在美國、波蘭、香港、西安、武漢和深圳等地設(shè)立研發(fā)中心，在圖像、語音語義技術(shù)等領(lǐng)域開展了大量的技術(shù)工作，并應(yīng)用于手機(jī)、電視產(chǎn)品中；在語音、語義和圖像領(lǐng)域構(gòu)建了大量自有數(shù)據(jù)，已建立了 25 個(gè)大類垂直領(lǐng)域數(shù)據(jù)集。

通過這些處于技術(shù)前沿的項(xiàng)目，TCL 希望可以引進(jìn)全球頂尖的技術(shù)資源，解決重大、前瞻性的技術(shù)難題，實(shí)現(xiàn)共贏。TCL 會(huì)為合作者提供充足的研發(fā)經(jīng)費(fèi)，并重獎(jiǎng)有突出貢獻(xiàn)的項(xiàng)目，針對有重大突破的技術(shù)可以進(jìn)行 IP 合作。

另外，TCL 還可以提供優(yōu)良的研發(fā)條件：在人工智能技術(shù)方面，可以提供垂直領(lǐng)域獨(dú)有的高質(zhì)量數(shù)據(jù)、算法和落地的應(yīng)用場景。

在新型顯示技術(shù)方面，可以提供國際一流的實(shí)驗(yàn)平臺(tái)、上下游產(chǎn)業(yè)的驗(yàn)證環(huán)境和配套技術(shù)，還可以提供優(yōu)秀的技術(shù)團(tuán)隊(duì)配合開展工作，以及提供高質(zhì)量、舒適的生活配套資源。

在新型顯示領(lǐng)域，TCL 分別在深圳、廣州和武漢設(shè)立研發(fā)中心，擁有一支研發(fā)隊(duì)伍。

創(chuàng)辦港大-TCL 人工智能聯(lián)合研究院，聘請29名技術(shù)顧問

大會(huì)當(dāng)天，TCL 還與香港大學(xué)簽訂建立港大-TCL 人工智能聯(lián)合研究院協(xié)議，并與中科院蘇州納米所、高校和企業(yè)簽訂了 7 個(gè)合作項(xiàng)目，希望能和更多的國內(nèi)外頂尖高校、企業(yè)建立良好的合作關(guān)系。

此外，TCL 還宣布聘請了 29 名業(yè)界頂級技術(shù)專家為技術(shù)顧問，和他們開展合作，其中，CSDN創(chuàng)始人&董事長，極客幫創(chuàng)投創(chuàng)始合伙人蔣濤也作為技術(shù)專家被邀請參會(huì)。

與中美貿(mào)易相互封鎖的態(tài)度不同，TCL 依然保持這對外開放的姿態(tài)，蔣濤在會(huì)間采訪中也表達(dá)了自己對于技術(shù)開放的理解：“從戰(zhàn)略和實(shí)際的角度，我們可能都需要建設(shè)一套自己的研發(fā)、評價(jià)和科技和開源體系，所以反過來這會(huì)帶來一些機(jī)會(huì)。開放技術(shù)大會(huì)其實(shí)就是一種很好的模式，通過開放、開源來推進(jìn)整個(gè)行業(yè)的進(jìn)步?！?/p>

預(yù)計(jì)未來3年，TCL 還將聘請 100 名業(yè)內(nèi)頂尖技術(shù)專家作為技術(shù)顧問，助力開拓技術(shù)視野，洞察前沿技術(shù)趨勢。此外，作為全球技術(shù)合作戰(zhàn)略之一，TCL 還將籌建國家新型顯示技術(shù)創(chuàng)新中心。目前，TCL 已聚集 30 所研究型大學(xué)，12 個(gè)國家重點(diǎn)實(shí)驗(yàn)室及多家科研院所和近 100 家上下游企業(yè)。

作為一家全球化的智能產(chǎn)品制造及互聯(lián)網(wǎng)應(yīng)用服務(wù)企業(yè)集團(tuán)，TCL 十分重視產(chǎn)品技術(shù)能力，2018 年，TCL 研發(fā)投入 56 億元，擁有 12000 多名研發(fā)技術(shù)人員。截止 2019 年 5 月，TCL 全球?qū)＠暾埩繛?61234 件，其中國內(nèi) 39011 件，申請國外專利 11067 件，另有 11156 件的 PCT 國際專利申請。特別值得一提的是，根據(jù)對全球量子點(diǎn)已公開專利的調(diào)查，TCL 在量子點(diǎn)電致發(fā)光領(lǐng)域的公開專利數(shù)量為 822 件，居全球第二名，僅次于三星。