SIGGRAPH 2023 | 貼圖幫手：NVIDIA Research 展示生成式 AI 如何幫助創(chuàng)建和編輯逼真的材質(zhì)

研究人員展示能夠快速創(chuàng)建和編輯材質(zhì)的 AI 技術(shù)，助力加速 3D 工作流。

在 SIGGRAPH 上，NVIDIA 的研究人員展示了一種可以幫助藝術(shù)家快速創(chuàng)建和迭代 3D 場景材質(zhì)的生成式 AI 工作流。

這項研究的演示現(xiàn)身 SIGGRAPH 展會 Real-Time Live 活動，展示了藝術(shù)家如何利用文本或圖像提示來更快地生成織物、木材和石材等自定義紋理材質(zhì)，同時對創(chuàng)作進行更加精細的把控。NVIDIA Picasso 將提供這些功能，使企業(yè)、軟件創(chuàng)作者和服務(wù)提供商能夠使用其經(jīng)過完全授權(quán)的數(shù)據(jù)來開發(fā)自定義生成式 AI 材質(zhì)模型。

這套 AI 模型將促進材質(zhì)創(chuàng)建和編輯的迭代，使企業(yè)能夠提供新工具來幫助藝術(shù)家快速完善 3D 對象的外觀，直到達到想要的效果。

在演示中，NVIDIA 研究人員在 AI 的輔助下，像室內(nèi)設(shè)計師一樣嘗試用 3D 渲染應(yīng)用制作了一個客廳場景。這次研究人員使用的是 NVIDIA Omniverse USD Composer——一個使用通用場景描述（即 OpenUSD）進行場景組裝和構(gòu)圖的參考應(yīng)用。他們使用這個應(yīng)用添加帶有磚紋理的墻壁，創(chuàng)建和修改沙發(fā)與靠墊的織物選項，并在墻壁的特定區(qū)域加入一個抽象的動物設(shè)計。

生成式 AI 推動實現(xiàn)設(shè)計迭代

這次 Real-Time Live 演示結(jié)合了幾個經(jīng)過優(yōu)化的 AI 模型，開發(fā)者將能夠使用 Picasso 來自定義這些工具，并將其集成到專為藝術(shù)家打造的創(chuàng)意應(yīng)用程序中。

在這些功能集成到創(chuàng)意應(yīng)用中后，藝術(shù)家只需要輸入簡短的文本提示就能生成磚塊或馬賽克圖案等材質(zhì)。這些材材質(zhì)可以平鋪，所以可以在任何大小的表面上無縫復(fù)制。他們還可以導(dǎo)入?yún)⒖紙D像，比如一塊法蘭絨織物，然后將其應(yīng)用于虛擬場景中的任何對象。

AI 編輯工具可以讓藝術(shù)家修改他們正在處理的材質(zhì)的特定區(qū)域，例如咖啡桌紋理的中心。

這些 AI 生成的材質(zhì)支持符合物理學(xué)的渲染，可以逼真地對場景光照的變化作出響應(yīng)。其所包含的法線、粗糙度和環(huán)境遮擋貼圖等功能對于創(chuàng)建和微調(diào)逼真 3D 場景的材質(zhì)至關(guān)重要。

在 NVIDIA Tensor Core GPU 的加速下，藝術(shù)家可以近乎實時地生成材質(zhì)并在后臺升級，可實現(xiàn)高達 4K 的分辨率，同時創(chuàng)作者可以繼續(xù)完善場景的其他部分。

在建筑、游戲開發(fā)和室內(nèi)設(shè)計等創(chuàng)意產(chǎn)業(yè)中，這些功能可以幫助藝術(shù)家快速挖掘創(chuàng)意并嘗試不同的美學(xué)風(fēng)格，創(chuàng)造出多個版本的場景。

例如，游戲開發(fā)者可以使用這些生成式 AI 功能加速開放世界環(huán)境設(shè)計，或創(chuàng)建角色的服裝等。建筑師可以在不同的照明環(huán)境中嘗試不同風(fēng)格的建筑立面設(shè)計。

使用 NVIDIA Picasso 構(gòu)建生成式 AI 服務(wù)

這些符合物理學(xué)的材質(zhì)生成功能都將在 NVIDIA Picasso 中提供。NVIDIA Picasso 是一個云平臺，企業(yè)能夠在其上構(gòu)建、優(yōu)化和微調(diào)用于視覺內(nèi)容的生成式 AI 基礎(chǔ)模型。

借助 Picasso，內(nèi)容提供商能夠基于完全授權(quán)的版權(quán)數(shù)據(jù)開發(fā)并訓(xùn)練生成式 AI 工具和服務(wù)。Picasso 隸屬于 NVIDIA AI Foundations，NVIDIA AI Foundations 是一套模型制作服務(wù)，旨在推動生成式 AI 在文本、視覺內(nèi)容和生物學(xué)領(lǐng)域的應(yīng)用。

在 SIGGRAPH 主題演講中，NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛還宣布了一項新的 Picasso 功能——根據(jù)簡單的文本或圖像提示生成逼真的 360 HDRi 環(huán)境貼圖，并以此為 3D 場景增色。

在 SIGGRAPH Real-Time Live活動上了解該研究

Real-Time Live 是 SIGGRAPH 上最受期待的活動之一。今年，該活動將展示十多個經(jīng)過評審的項目，包括 Roblox、猶他大學(xué)以及 NVIDIA 初創(chuàng)加速計劃（旨在培育尖端初創(chuàng)企業(yè)的項目）成員 Metaphysic 的項目。

在活動中，NVIDIA 的研究人員現(xiàn)場展示了這種交互式材質(zhì)研究，包括演示超分辨率工具。

SIGGRAPH 2023

NVIDIA 精彩發(fā)布

【1】SIGGRAPH 主題演講：NVIDIA 首席執(zhí)行官帶來生成式 AI 多項創(chuàng)新 SIGGRAPH 2023 | NVIDIA 發(fā)布新一代 GH200 Grace Hopper 超級芯片平臺 SIGGRAPH 2023 | NVIDIA 發(fā)布支持生成式 AI 與 OpenUSD 的重大 Omniverse 升級 SIGGRAPH 2023 | NVIDIA Omniverse 開啟通往 OpenUSD 廣闊天地的大門 SIGGRAPH 2023 | NVIDIA 與全球數(shù)據(jù)中心系統(tǒng)制造商大力推動 AI 與工業(yè)數(shù)字化的發(fā)展 SIGGRAPH 2023 | NVIDIA 與全球工作站廠商共同推出用于生成式 AI、LLM 開發(fā)、內(nèi)容創(chuàng)作和數(shù)據(jù)科學(xué)的系統(tǒng) SIGGRAPH 2023 | NVIDIA AI Workbench 助力全球企業(yè)加速采用自定義生成式 AI SIGGRAPH 2023 | NVIDIA 與 Hugging Face 將連接數(shù)百萬開發(fā)者與生成式 AI 超級計算

更多精彩，仍在繼續(xù)...

敬請持續(xù)關(guān)注

點擊“閱讀原文”，或掃描下方海報二維碼，觀看 NVIDIA 創(chuàng)始人兼 CEO 黃仁勛在 SIGGRAPH 現(xiàn)場發(fā)表的 NVIDIA 主題演講回放，了解 NVIDIA 的新技術(shù)，包括屢獲殊榮的研究，OpenUSD 開發(fā)，以及最新的 AI 內(nèi)容創(chuàng)作解決方案。