中國智能影像生產(chǎn)技術(shù):文娛全產(chǎn)業(yè)鏈基礎(chǔ)建設(shè)

隨著5G技術(shù)的大規(guī)模商用，高分辨率的視頻流量將呈指數(shù)級增長。移動視頻行業(yè)委員會預(yù)測顯示，至2028年5G流量的90%將來自視頻，增強(qiáng)型視頻（VR、AR、AGC）將是5G的第二大用例類型。

隨后，英特爾發(fā)布《5G娛樂經(jīng)濟(jì)報告》進(jìn)一步顯示，5G視頻內(nèi)容消費(fèi)加速，用戶月均流量使用量將從當(dāng)前的11.7GB增長至84.8GB，2021-2028年傳媒和娛樂企業(yè)由此將受益新增營收1400億美元，增強(qiáng)型視頻（VR、AR、AGC）服務(wù)的營收潛力可達(dá)960億美元。

報告分析師指出，“5G+AI技術(shù)紅利”將驅(qū)動視頻產(chǎn)業(yè)迎來增強(qiáng)型視頻（VR、AR、AGC）內(nèi)容快速發(fā)展，如何搭載5G順風(fēng)車，中國、日本、韓國等亞太地區(qū)的部分文娛企業(yè)已經(jīng)率先開始使用人工智能技術(shù)輔助視頻內(nèi)容生產(chǎn)，開始大規(guī)模用AI生產(chǎn)技術(shù)解決5G時代的內(nèi)容及圖像質(zhì)量。

中國智能影像生產(chǎn)技術(shù)：文娛全產(chǎn)業(yè)鏈基礎(chǔ)建設(shè)

較其他國家及地區(qū)，中國媒體及娛樂企業(yè)對全面智能視頻化保持熱情。大部分企業(yè)認(rèn)為，智能影像生產(chǎn)技術(shù)能切實(shí)可行的提高制作及分發(fā)效率，借助AI技術(shù)能夠?yàn)橛脩籼峁┝可矶ㄖ坪椭悄芡扑]的內(nèi)容，它改變的是內(nèi)容創(chuàng)作和分發(fā)的方式。包括《南方日報》、騰訊、澎湃、芒果TV、愛奇藝、華視傳媒等在內(nèi)的傳媒和娛樂企業(yè)積極借助人工智能技術(shù)構(gòu)建自主可控平臺或提供優(yōu)質(zhì)視頻內(nèi)容產(chǎn)品。

目前，AI技術(shù)的應(yīng)用已經(jīng)貫穿整個文創(chuàng)產(chǎn)業(yè)鏈，包含劇本創(chuàng)作、選角、流量預(yù)測、審核、編碼、剪輯、運(yùn)營、搜索、推薦、宣發(fā)、熱點(diǎn)預(yù)測、熱點(diǎn)提取、追星、廣告投放、在線交互等諸多環(huán)節(jié)，實(shí)現(xiàn)智能創(chuàng)作、智能生產(chǎn)、智能標(biāo)注、智能分發(fā)、智能播放、智能變現(xiàn)、智能客服等七大方面的充分應(yīng)用。

據(jù)Forrester發(fā)布的《2019-2020 Video AI技術(shù)預(yù)測》報告顯示，90%的中國視頻平臺正在借助專業(yè)的視頻識別技術(shù)以對視頻進(jìn)行數(shù)據(jù)結(jié)構(gòu)化，在視頻內(nèi)容原創(chuàng)、視頻營銷、視頻結(jié)構(gòu)化商用、視頻大數(shù)據(jù)領(lǐng)域、機(jī)器人流程化等領(lǐng)域產(chǎn)生財務(wù)績效，通過自動化影像加工輔助技術(shù)、生產(chǎn)技術(shù)為產(chǎn)業(yè)升級提供動力。

在智能影像生產(chǎn)環(huán)節(jié)，國內(nèi)人工智能公司影譜科技的視頻內(nèi)容自動化生產(chǎn)引擎—MAPE (Moviebook Auto-Production Engine)是一個人工智能平臺，利用視頻識別及視頻生產(chǎn)技術(shù)為文娛企業(yè)提供內(nèi)容生產(chǎn)平臺。

在商業(yè)化環(huán)節(jié)，國內(nèi)多個熱門作品都采用了基于人工智能的內(nèi)容生產(chǎn)技術(shù)，包括熱播的《我的師傅》、《巔峰之夜》、《我最愛的女人們》、《女兒們的熱愛》、《妻子的浪漫旅行》、《戀愛先生》、《楚喬傳》等，這些熱門節(jié)目的商業(yè)化技術(shù)實(shí)現(xiàn)與傳統(tǒng)方式不盡相同，通過采納影譜科技智能影像生產(chǎn)技術(shù)，讓品牌主的廣告畫面成為原視頻內(nèi)容的一個部分，更有甚者是把原本不存在的品牌主物品以“虛擬廣告道具”方式無違和感的植入視頻播放/用戶觀影過程中。

不僅如此，除視頻以外，圖、文、音、影等不同信息載體之間無縫轉(zhuǎn)換正成為智能傳媒的重要基礎(chǔ)設(shè)施。傳統(tǒng)的圖像、文字、音頻、視頻相互轉(zhuǎn)化，通常人工需要一周時間，平均花費(fèi)263美元，內(nèi)容失真率卻高達(dá)52%。而AI技術(shù)的加入，可以使信息介質(zhì)融合互換更快速、更低價、更有效，如前端內(nèi)容采寫可通過AI技術(shù)一鍵生成與之匹配的視頻、音頻等，改變內(nèi)容開發(fā)整個過程，從內(nèi)容創(chuàng)造、生成機(jī)制、影響力提前預(yù)測、觀察數(shù)據(jù)等方面。

雖然一些媒體和娛樂公司對AI的投入保持謹(jǐn)慎，但大多數(shù)專家預(yù)測中國的5G+人工智能發(fā)展速度較全球市場將更快一步。

日本智能影像生產(chǎn)技術(shù)：如何提升動畫制作效率

顯然，日本動畫產(chǎn)業(yè)是這次AI+5G視頻消費(fèi)升級的核心。動畫產(chǎn)業(yè)市場規(guī)模超過2兆日元的日本，在人工智能技術(shù)與效能方面也進(jìn)行了具有個性化的探索，在動畫預(yù)處理、動畫動態(tài)、動畫合成等全產(chǎn)業(yè)上已形成深度應(yīng)用場景。

首先，AI生成工具提高繪畫產(chǎn)業(yè)鏈生產(chǎn)效率。

自動上色AI 工具的成功商用，讓畫師的制作進(jìn)一步簡化。近期，白泉社（發(fā)行漫畫期刊、漫畫等為主的會社）和博報堂（日本知名的廣告與傳播集團(tuán)）DY Digital 宣布開始使用 AI 技術(shù)來交付和銷售自動著色的彩色漫畫。第一部彩色漫畫將在電子書店網(wǎng)站（如白泉社 e-net）發(fā)送。未來還將通過自動對其他作品進(jìn)行著色來制作和分發(fā)彩色版本。

這是由日本科技企業(yè)Preferred Networks 研發(fā)的一款自動上色工具“PaintsChainer”，利用深度學(xué)習(xí)的 AI（人工智能），代替人工進(jìn)行大量簡單的上色線稿工作，用戶只需上傳一張黑白線稿，PaintsChainer 會通過神經(jīng)網(wǎng)絡(luò)算法自動上色，生成一張彩色漫畫。

有了AI 的輔助之后，畫師只需要完成部分輪廓和剪影的設(shè)計，計算機(jī)就可以自動生成細(xì)化的畫面，之后輸入黑白的線稿就可以涂畫大體的顏色，最后畫師只需要做一些細(xì)微的調(diào)整。這一生產(chǎn)方式的投入，成倍提高了新人的工作效率、每天作畫張數(shù)的增加便可帶來收入的提高。

除 Paintschainer 之外，另一項(xiàng)簡化畫師工作流程的項(xiàng)目也在日本引起了較大的關(guān)注。Edgar Simo-Serra 團(tuán)隊開發(fā)出一種將鉛筆畫的粗略草圖轉(zhuǎn)化成線稿的 AI 工具。該模型框架基于完全卷積神經(jīng)網(wǎng)絡(luò)，當(dāng)輸入一個粗略的草圖圖像模型后，即可獲得一個干凈的簡化線稿。

不僅是漫畫彩色化，并且能有助于解決目前日本動畫制作現(xiàn)場的困境。最近上映的劇場版動畫《FLCL Progressive》（《フリクリ プログレ》）采用Dwango公司旗下機(jī)械學(xué)技術(shù)研發(fā)部門“Dwango Media Village”開發(fā)的最新動畫制作支持技術(shù)。

（Dwango Media Village研發(fā)AI技術(shù)擬人形象。圖左：時季ヶ原 埋，擔(dān)當(dāng)工程:中割り。圖右：時季ヶ原 寫，擔(dān)當(dāng)工程:原畫トレス）

該技術(shù)主要應(yīng)對動畫制作過程中的“中割”（中割り）和“原畫臨描”（原畫トレス）兩大環(huán)節(jié)?！爸懈睢迸c“原畫臨描”在動畫制作過程中屬于讓畫面“動”起來的工作，往往需要大量的動畫師花費(fèi)不少時間去一張一張完成，但技術(shù)含量相對于原畫等其他環(huán)節(jié)較低。事實(shí)上，“Dwango Media Village”即是通過計算機(jī)視覺識別及自動生成技術(shù)將這一部分的勞動量節(jié)省下來。

“電影制作過程中，雖然經(jīng)過AI生成的畫面，還需要作畫監(jiān)督進(jìn)行修正”，擔(dān)任《FLCL Progressive》第五話監(jiān)督的末澤慧就表示，“但AI給工作帶來的便利超過麻煩，隨著AI學(xué)會的越多，需要人工修繕的地方就會越來越少”。

其次，顯著減少動畫制作企業(yè)成本，第二視頻產(chǎn)業(yè)在日本覺醒。

對于動畫制作公司來說，AI 的帶來的好處是顯而易見的，首先就是制作成本的降低。

近日，I.G port發(fā)布的最新財報顯示，在動畫制作事業(yè)上，公司本期（2017.6.1-2018.2.28）損失為3.99億日元（去年同期為2.34億日元的損失）。主要是為了制作出讓觀眾滿意的高質(zhì)量動畫，制作費(fèi)用持續(xù)增加。與之相似的還有龍之子動畫工作室（NTV 旗下），2017財年虧損了5000萬日元。目前一部動畫的參與制作人員平均百余人，較日漸增加的人工費(fèi)用，將最底層工作交由計算機(jī)完成，是動畫制作公司的最佳選擇。

其次，AI 也能緩解日本動畫公司人手不足的情況。在這種局面下，早稻田大學(xué)科森島繁生研究室研發(fā)出了通過現(xiàn)實(shí)場景的照片自動生成背景的CG技術(shù)。該技術(shù)旨在讓創(chuàng)作者能夠更加便利、輕松地使用和工作。生成一張背景僅需10秒。進(jìn)一步，除了靜止的畫面，讓運(yùn)動的影像也自動生成，效率大大提升。

自動內(nèi)容生產(chǎn)技術(shù)（AGC）的引入將釋放大量輕創(chuàng)作勞動，借助計算機(jī)視覺等AI技術(shù)減少動畫制作時所需的人物力高消耗。

如前不久入圍威尼斯電影節(jié)、由Production I.G制作的《攻殼機(jī)動隊 新劇場版Virtual Reality Diver》，通過AI視頻生成+VR技術(shù)帶來更新的動畫觀賞體驗(yàn)。

早前，Pixiv推出過利用AI上色的功能。今年7月，P站又推一款“黑科技” VRoid Studio，讓不懂三維建模技術(shù)的普通人也能輕松創(chuàng)作出自己的3D角色。

另外，日本虛擬偶像和動畫的關(guān)系也越走越近，已有日本公司開始籌劃使用VR+VTuber進(jìn)行自動化動畫生產(chǎn)（AGC）的制作方式。今年9月，日本VR技術(shù)公司XVI（株式會社エクシヴィ）和影像音樂集團(tuán)愛貝克斯（Avex）共同成立的AniCast Lab.正是希望通過VTuber+VR的應(yīng)用，將動畫制作的周期縮短，減少人力勞動，以及節(jié)約成本。AniCast Lab.創(chuàng)造一種全新的動畫制作方式，采用智能影像生產(chǎn)技術(shù)令普通人也能制作自己的動畫并發(fā)布分享。

隨著5G到來，智能影像技術(shù)正讓日本動漫產(chǎn)業(yè)走向全數(shù)字化的可能，日本動畫公司的抉擇，也將影響到海外同行能否借機(jī)實(shí)現(xiàn)“變道超車”。

5G+AI視頻娛樂已經(jīng)不僅僅是一種技術(shù)想象，而是真實(shí)走進(jìn)了一個產(chǎn)業(yè)周期中的快速上行通道。對于必須兼顧視頻圖像和內(nèi)容質(zhì)量的文娛創(chuàng)作企業(yè)而言，展開對全自動化視頻生產(chǎn)技術(shù)的應(yīng)用研究成為一種微妙的供給平衡手段。事實(shí)上，一些先行企業(yè)將取得“技術(shù)先發(fā)優(yōu)勢”作為最大的戰(zhàn)略目標(biāo)。