一種能夠預(yù)測(cè)特定風(fēng)格舞蹈動(dòng)作的人工智能

近日，谷歌藝術(shù)與文化部的Damien Henry與英國(guó)舞蹈編導(dǎo)Wayne McGregor合作，共同研發(fā)了一種能夠預(yù)測(cè)特定風(fēng)格舞蹈動(dòng)作的人工智能。

這個(gè)工具可以根據(jù)數(shù)百小時(shí)的視頻片段生成自創(chuàng)的舞蹈編排，所有的資料都來(lái)自于Wayne McGregor自己以及他公司的十位舞者的檔案。

在觀看了他們的舞蹈動(dòng)作視頻后，AI可以抓取出這些舞蹈家的個(gè)人風(fēng)格，并創(chuàng)造類似風(fēng)格的獨(dú)舞編排。

McGregor對(duì)科學(xué)和技術(shù)并不是一時(shí)興起，他擁有普利茅斯大學(xué)的名譽(yù)科學(xué)博士學(xué)位。他說(shuō)，這個(gè)新項(xiàng)目是在回顧他25年來(lái)的表演視頻時(shí)想到的，他想知道技術(shù)能否幫助保持表演的新鮮感。

McGregor 說(shuō)到：“我想用一種有趣的方式來(lái)利用這個(gè)龐大的工作檔案，所以我問(wèn)Damien是否可以用它來(lái)產(chǎn)生一些新的東西。所有的這一切最后都?xì)w結(jié)到了編排中的一個(gè)至關(guān)重要的問(wèn)題：如何不斷創(chuàng)造新的內(nèi)容？”

人工智能已經(jīng)能夠預(yù)測(cè)很多事情，比如你將在手機(jī)上輸入的下一個(gè)單詞，或者在上傳到社交媒體的圖片中識(shí)別你的身份。但是，預(yù)測(cè)手勢(shì)對(duì)人工智能來(lái)說(shuō)是很棘手的。

Henry說(shuō)，他在科學(xué)網(wǎng)站distill.pub上的一篇帖子中得到了靈感，該帖子使用神經(jīng)網(wǎng)絡(luò)，根據(jù)你在前一封信中的筆跡去預(yù)測(cè)下一封信的筆跡形式。他提出了一個(gè)類似的算法，可以對(duì)給定的運(yùn)動(dòng)進(jìn)行預(yù)測(cè)。通過(guò)視頻捕捉舞蹈演員的姿勢(shì)，然后使用工具提供接下來(lái)最有可能的幾個(gè)舞蹈片段，并在屏幕上實(shí)時(shí)顯示它們。

這項(xiàng)技術(shù)錄入了McGregor的檔案和他的舞蹈演員的錄制視頻。Henry認(rèn)為，在某種程度上，人工智能學(xué)會(huì)了如何跳舞，但它的舞蹈風(fēng)格與Wayne McGregor十分相似。

該工具的工作原理是利用網(wǎng)絡(luò)攝像機(jī)獲取視頻輸入，并通過(guò)繪制不同身體部位之間的點(diǎn)，提取舞蹈演員做出特定姿勢(shì)的“骨架”。它將這個(gè)輸入至三種不同的算法來(lái)猜測(cè)下一個(gè)舞蹈姿勢(shì)可能是什么，這需要考慮到特定舞者的個(gè)人風(fēng)格，也要考慮到公司其他九個(gè)舞者的風(fēng)格。

這總共產(chǎn)生了30個(gè)潛在的編排序列，目前持續(xù)時(shí)間約10秒，并使用類似的"骨架" 視覺顯示在計(jì)算機(jī)屏幕上，McGregor會(huì)選擇他想用哪一個(gè)序列。Henry說(shuō)：“接下來(lái)，無(wú)論舞蹈演員跳什么，都可以再次錄制，重新輸入機(jī)器?！?/p>

由AI工具讀取的舞者"骨架"

對(duì)于McGregor來(lái)說(shuō), 這項(xiàng)技術(shù)最引人入勝的一個(gè)方面是, 它可以學(xué)習(xí)和再現(xiàn)舞者的特殊風(fēng)格。

他說(shuō)：“我之所以選擇某些舞者，是因?yàn)樗麄兊纳眢w特征和特殊的運(yùn)動(dòng)方式?！盌amien的發(fā)明的天才之處在于，它抓住了表演的精髓。

實(shí)際上，算法在編舞中已經(jīng)被使用了幾十年。

早在1964年，在匹茲堡大學(xué)，Jeanne Beaman和Paul Le Vasseur就用計(jì)算機(jī)從不同的時(shí)間變化、空間方向和他們輸入的運(yùn)動(dòng)類型中產(chǎn)生隨機(jī)的舞蹈序列。本世紀(jì)初，編導(dǎo)們使用了一種叫"choreograph" 的軟件，該軟件是一種排序工具，可以讓編導(dǎo)在時(shí)間軸上設(shè)置數(shù)字變體, 在表演過(guò)程中作為舞者的提示表。由于舞臺(tái)周圍安裝了傳感器, 它能夠?qū)崟r(shí)更新舞者的動(dòng)作。

但是人工智能在舞蹈和創(chuàng)造力方面有局限性。Michael Klien是杜克大學(xué)舞蹈項(xiàng)目的編導(dǎo)，也是ChoreoGraph的熟練使用者。他的軟件作品在倫敦皇家歌劇院展出，但他解釋說(shuō)，他很快就厭倦了這一過(guò)程，并在2002年放棄了系統(tǒng)，轉(zhuǎn)而直接與他的舞蹈演員合作。

他表示：“我們不斷在系統(tǒng)中加入更多的算法，使其更加智能，我想實(shí)現(xiàn)人工智能編排結(jié)構(gòu)。但我意識(shí)到，人工智能不能作為開發(fā)舞蹈的中堅(jiān)力量。我們對(duì)智能的假設(shè)構(gòu)建出我們的人工智能機(jī)器，這也意味著我們不會(huì)突破我們的想象力極限。”

AI工具預(yù)測(cè)舞蹈演員下一步動(dòng)作的示例

Henry表示，谷歌的工具無(wú)法發(fā)明出以前從未見過(guò)的動(dòng)作。像所有的人工智能一樣，它通過(guò)“插值”來(lái)構(gòu)建結(jié)果——也就是說(shuō)，它預(yù)測(cè)的是在之前所有學(xué)到的事情中最有可能發(fā)生的事情。

“我們不是要用AI取代編舞這個(gè)角色，”他說(shuō)?！暗?，AI可以以一種非常有效和快速的方式進(jìn)行創(chuàng)造，這樣創(chuàng)造的過(guò)程就會(huì)永不停止。真正的創(chuàng)造部分將來(lái)自Wayne對(duì)這些舞蹈序列的選擇與使用。”

當(dāng)然，AI編舞也不是完全不具備創(chuàng)造力。該技術(shù)可以畫出一張它所識(shí)別的不同舞蹈動(dòng)作的“地圖”，并且推薦特定的動(dòng)作序列。Henry解釋說(shuō), 它在動(dòng)作之間轉(zhuǎn)換的方式可能并未在訓(xùn)練數(shù)據(jù)中出現(xiàn)過(guò)。這意味著它必須有潛力想出以前從未做過(guò)的動(dòng)作。McGregor 表示，“我總是對(duì)一件我從未見過(guò)的東西感興趣”。

這項(xiàng)技術(shù)也可以設(shè)置為提供一個(gè)混合兩個(gè)舞者風(fēng)格的編排舞蹈序列。當(dāng)公司試用時(shí)這一功能時(shí)，這引起觀看者哈哈大笑，你想象一下你以別人的風(fēng)格在屏幕上移動(dòng)，你就能體會(huì)到這種樂趣了。

比如說(shuō)，在McGregor的檔案中插入巴西桑巴舞的錄像，會(huì)發(fā)生什么？結(jié)果將會(huì)是一場(chǎng)以前可能從未見過(guò)的混合舞。但是McGregor說(shuō)，他并不擔(dān)心AI會(huì)編排出四不像的舞蹈?！敖酉聛?lái)如何選擇還是我來(lái)決定的。我是整個(gè)舞蹈的源頭。我更把這看作一個(gè)創(chuàng)造的機(jī)會(huì)，我很喜歡這種不確定的感覺，像在玩游戲一樣?！?/p>

McGregor希望這一工具將來(lái)可以用于實(shí)時(shí)工作，每個(gè)舞蹈演員都有自己的展示屏幕，并在舞臺(tái)上可以再現(xiàn)算法傳遞出的舞蹈序列。但是一些技術(shù)細(xì)節(jié)仍然需要整理——比如，該程序能否同時(shí)支持十部手機(jī)連接，能否將舞蹈序列同時(shí)顯示在屏幕上？

McGregor對(duì)此很有信心“我們將會(huì)實(shí)現(xiàn)實(shí)時(shí)舞蹈編排，這一定會(huì)很吸引人?！?/p>