使用 NVIDIA Omniverse輕松創(chuàng)建可擴(kuò)展的虛擬形象

介紹使用 NVIDIA Omniverse 3D 模擬和協(xié)作平臺(tái)推動(dòng)藝術(shù)創(chuàng)作或設(shè)計(jì)流程的個(gè)人創(chuàng)作者和開發(fā)者。

該 NVIDIA 初創(chuàng)加速計(jì)劃成員構(gòu)建的 Omniverse 擴(kuò)展程序能夠通過移動(dòng)掃描實(shí)時(shí)創(chuàng)建逼真的個(gè)性化虛擬形象。

想象一個(gè)場景：您拍了一張自拍，幾秒鐘后這張照片就變成了一個(gè)會(huì)動(dòng)、會(huì)說的個(gè)性化的 3D 虛擬形象。

利用 NVIDIA Omniverse 3D 設(shè)計(jì)協(xié)作和模擬平臺(tái)的一項(xiàng)全新擴(kuò)展程序就可以實(shí)現(xiàn)該場景。

該擴(kuò)展程序由軟件初創(chuàng)企業(yè) in3D 的開發(fā)人員創(chuàng)建，支持人們使用智能手機(jī)將個(gè)人的 3D 虛擬形象實(shí)時(shí)導(dǎo)入虛擬環(huán)境。Omniverse 擴(kuò)展程序是允許所有人創(chuàng)建和擴(kuò)展 Omniverse 應(yīng)用功能的核心構(gòu)件。

目前 in3D 應(yīng)用可以將人轉(zhuǎn)換成數(shù)字形式并導(dǎo)入 Omniverse 平臺(tái)。創(chuàng)作者可以利用該應(yīng)用構(gòu)建引人入勝的虛擬世界并讓虛擬形象來扮演故事中的英雄、演員或觀眾。該應(yīng)用可以在任何帶有攝像頭的手機(jī)上使用，并且能夠根據(jù)自拍再現(xiàn)用戶的物理形態(tài)和肌膚紋理。

這些虛擬形象甚至還能被導(dǎo)入具有動(dòng)畫和個(gè)性化設(shè)計(jì)的 3D 世界。

in3D 是 NVIDIA 初創(chuàng)加速計(jì)劃成員，該計(jì)劃是一項(xiàng)旨在培養(yǎng)尖端初創(chuàng)企業(yè)的全球免費(fèi)計(jì)劃。

輕松創(chuàng)建可擴(kuò)展的虛擬形象

過去創(chuàng)建一個(gè)逼真的 3D 虛擬形象需要花費(fèi)數(shù)月的時(shí)間以及高達(dá)數(shù)萬美元的成本。攝影測量法是一種能根據(jù)圖像創(chuàng)建人類 3D 模型的標(biāo)準(zhǔn)方法，該方法需要利用數(shù)字工作室完成，構(gòu)建成本極高，且虛擬形象缺乏可擴(kuò)展性。

in3D 的 3D 虛擬形象創(chuàng)建流程簡單且可擴(kuò)展。該應(yīng)用通過移動(dòng)掃描來捕捉一個(gè)人的幾何形狀、紋理、深度以及各種矢量，并利用這些信息復(fù)刻栩栩如生的細(xì)節(jié)，創(chuàng)造虛擬形象的預(yù)測動(dòng)畫。

in3D 的總部位于以色列特拉維夫。該公司首席執(zhí)行官 Dmitry Ulyanov 表示，該應(yīng)用能夠以厘米級(jí)的精度捕捉微小細(xì)節(jié)并自動(dòng)修復(fù)光照效果，以便能從一張自拍照片中獲得精確的頭部幾何形狀并以此預(yù)估用戶的準(zhǔn)確體形。

Ulyanov 表示，創(chuàng)作者在構(gòu)建 3D 世界時(shí)可以利用 in3D 軟件來節(jié)省時(shí)間等成本、提高生產(chǎn)力。

“手動(dòng)創(chuàng)建一個(gè)虛擬形象可能需要長達(dá)數(shù)月的時(shí)間。但利用 in3D 的掃描應(yīng)用和軟件開發(fā)工具包，用戶能在同樣的時(shí)間內(nèi)使用 GPU 和手機(jī)掃描并上傳 21000 個(gè)人來構(gòu)建虛擬形象?！?/p>

連接 Omniverse

Ulyanov 表示，通過將 in3D 的擴(kuò)展程序與 NVIDIA Omniverse Cloud Engine（ACE）結(jié)合使用，用戶可以輕松地自定義從 in3D 導(dǎo)入的虛擬形象，從而實(shí)現(xiàn)在虛擬世界實(shí)時(shí)、大規(guī)模的互動(dòng)，為虛擬形象的構(gòu)建帶來更多可能性。

in3D 使用一種開源、可擴(kuò)展的文件格式——通用場景描述（USD）將其高保真虛擬形象無縫集成到 Omniverse。虛擬形象數(shù)據(jù)全都包含在 USD 文件中，用戶不需要復(fù)雜的著色器或嵌入物，只需要簡單拖放就能將虛擬形象導(dǎo)入 Omniverse。

在將 USD 格式的虛擬形象導(dǎo)入 Omniverse 后，用戶就可以在 Omniverse Create 和 Audio2Face 等應(yīng)用中對虛擬形象進(jìn)行其他操作。Omniverse 有支持用戶整體內(nèi)容創(chuàng)作的完整工具集，比如制作虛擬形象的身體動(dòng)畫的重定向工具以及能夠制作虛擬形象的面部表情的 Audio2Face 等。

in3D 使用 Omniverse Kit 和 VSCode 計(jì)算機(jī)程序來完成構(gòu)建該 Omniverse 擴(kuò)展程序的開發(fā)流程。Ulyanov 表示，VSCod 程序支持用戶在代碼中自行設(shè)置斷點(diǎn)，是一種簡單、便捷、開箱即用的 Omniverse 連接解決方案，in3D 正是通過該程序來與 Omniverse 連接。

Ulyanov 還表示：“將我們的 SDK 與其他 3D 開發(fā)者的軟件整合在一起能夠帶來巨大的改變。通過上線我們的 Omniverse 擴(kuò)展程序，我們希望能夠擴(kuò)大使用我們虛擬形象應(yīng)用的開發(fā)者人數(shù)?！?/p>

in3D 首席營銷官 Sergei Sherman 表示：“我們現(xiàn)在已經(jīng)能夠上傳我們的 SDK 并將它與 3D 開發(fā)者使用的所有工具相連，in3D 已成為能在所有 3D 開發(fā)環(huán)境中部署的解決方案，在這么短的時(shí)間內(nèi)僅依靠我們自己的資源是無法實(shí)現(xiàn)的?！?/p>

加入創(chuàng)作者行列

全世界的創(chuàng)作者和開發(fā)者可以免費(fèi)下載 NVIDIA Omniverse，企業(yè)團(tuán)隊(duì)可以使用該平臺(tái)完成他們的 3D 項(xiàng)目。

注冊并參與將于 9 月 19 日至 22 日舉行的 AI 和元宇宙時(shí)代的開發(fā)者大會(huì)——NVIDIA GTC 大會(huì)，了解如何運(yùn)用 Omniverse 連接和創(chuàng)建虛擬世界。大會(huì)期間還將舉辦數(shù)十場分會(huì)和特別活動(dòng)。所有人都可以免費(fèi)注冊 GTC 大會(huì)。

開發(fā)者可以在北京時(shí)間 9 月 10 日星期六早晨 6 點(diǎn)之前使用 Omniverse Code 創(chuàng)建 Omniverse 擴(kuò)展程序來參加首屆#ExtendOmniverse 競賽。參賽者將有機(jī)會(huì)贏得 NVIDIA RTX GPU。獲獎(jiǎng)?wù)呙麊螌⒃?GTC 上的 NVIDIA Omniverse 用戶組活動(dòng)中公布。

Omniverse 資源中心為開發(fā)者提供文檔和教程，這些文檔和教程詳細(xì)介紹了 Ulyanov 等開發(fā)者如何為該平臺(tái)構(gòu)建基于 USD 的自定義應(yīng)用和擴(kuò)展程序。