GTC23 | NVIDIA Studio 資訊：全新 AI 助力的藝術工具、功能更新、面向創(chuàng)作者 NVIDIA RTX 系統(tǒng)

編輯注：本文是我們每周發(fā)布的 NVIDIA Studio 創(chuàng)意加速系列欄目的一部分，該系列旨在介紹一些特邀藝術家、提供創(chuàng)意提示和技巧，并展示 NVIDIA Studio 技術如何改善創(chuàng)意工作流。我們還將深入探討全新 GeForce RTX 40 系列 GPU 的性能、技術和資源，以及它們將如何顯著加速內容創(chuàng)作。

無論是塑造能展露情緒的逼真角色，還是將簡單的文本轉換成圖像，強大的 AI 技術正在徹底改變 3D 內容創(chuàng)作。

NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛先生在 GTC 大會主題演講中宣布了一系列旨在簡化創(chuàng)作者工作流的改進，包括將生成式 AI 與 Omniverse Audio2Face 應用結合使用。

NVIDIA Omniverse 作為創(chuàng)建和處理元宇宙應用的平臺，已通過更新的虛幻引擎連接器、開放測試版 Unity 連接器和新的 SimReady 3D 素材實現(xiàn)進一步擴展。

全新 NVIDIA RTX GPU 采用 Ada Lovelace 架構，可為新一代筆記本電腦和臺式電腦工作站提供強勁動力，從而滿足 AI、設計和工業(yè)元宇宙的需求。

3 月版 NVIDIA Studio 驅動增加了對熱門 RTX 視頻超分辨率功能的支持，該功能現(xiàn)已可用于 GeForce RTX 40 和 30 系列 GPU。

在“NVIDIA Studio 創(chuàng)意加速” 欄目中，Adobe Substance 3D 藝術和開發(fā)團隊將介紹他們使用 Omniverse USD Composer（舊稱 Create）合作創(chuàng)作動畫短片 End of Summer 的過程。

Omniverse 更新大放異彩

即使創(chuàng)作者缺乏豐富的專業(yè)技術，他們依然可以借助專業(yè)的生成式 AI 工具提高工作效率。相較于傳統(tǒng)資產(chǎn)開發(fā)，生成式 AI 只需少量時間和成本，即可將創(chuàng)意轉變?yōu)楝F(xiàn)實，創(chuàng)造高質量、快速迭代的體驗。

AI 驅動的 Omniverse Audio2Face 應用僅使用音頻文件即可生成逼真的面部動畫，可以取代以往乏味的手動創(chuàng)建過程，以提高 3D 藝術家為配角制作動畫的效率。

此應用的最新版本在質量、可用性和性能方面實現(xiàn)了顯著升級，添加了新的 headless 模式和 REST API，使游戲開發(fā)者和其他創(chuàng)作者能夠在數(shù)據(jù)中心運行該應用，并處理來自多個用戶的大量音頻文件。

NVIDIA 為 Unity 工作流開發(fā)的全新 Omniverse 連接器已進入公測階段。創(chuàng)作者可以直接將 Unity 場景添加到 Omniverse Nucleus 服務器上，而且可以使用 DeepSearch 工具、縮略圖、書簽等平臺功能。單向實時同步工作流可實現(xiàn)實時更新。

虛幻引擎連接器已推出最新版本，Omniverse 用戶現(xiàn)在可以使用其中的 USD 導入功能導入骨架網(wǎng)格blendshape，并使用 Python USD 綁定在 Omniverse Nucleus 上訪問場景（Stage）。此版本還優(yōu)化了導入、導出和實時工作流，并更新了軟件開發(fā)套件。

此外，創(chuàng)作者還可使用超過 1000 種全新 SimReady 素材。SimReady 素材按照物體在現(xiàn)實世界的比例構建，擁有精確的質量、物理材質和重心，可以在 Omniverse PhysX 引擎中使用，以實現(xiàn)非常逼真的視覺效果和準確無誤的運動軌跡。

三月版 Studio 驅動帶來炫目超分辨率

盡管硬件的處理性能足夠，但是 NVIDIA RTX GPU 用戶觀看的在線視頻中，超過 90% 為 1080p 或更低的分辨率，并且放大后的畫質還會進一步降低。

解決方案：RTX 視頻超分辨率。此新功能利用 AI 提高通過 Google Chrome 和 Microsoft Edge 瀏覽器串流的任何視頻的質量，現(xiàn)已在 GeForce RTX 30 和 40 系列 GPU 上可用。

單擊圖像，查看雙三次上采樣（左）和 RTX 視頻超分辨率之間的區(qū)別。

該功能提高了視頻的銳度和清晰度，讓用戶即使在高分辨率顯示器上，也能夠以原生分辨率觀看在線內容。

RTX 視頻超分辨率功能現(xiàn)已在 3 月版 Studio 驅動上推出，即日起即可下載。

全新 NVIDIA RTX GPU 助力專業(yè)創(chuàng)作者

六個基于 Ada Lovelace 架構的全新專業(yè)級 NVIDIA RTX GPU 使創(chuàng)作者能夠使用筆記本電腦和臺式電腦滿足超復雜工作負載的需求。

NVIDIA RTX 5000、RTX 4000、RTX 3500、RTX 3000 和 RTX 2000 Ada Generation 筆記本電腦 GPU 的性能相較上一代至高可達 2 倍。NVIDIA RTX 4000 小型 (SFF) Ada Generation 臺式電腦 GPU 配備全新 RT Core、Tensor Core 和 CUDA Core，顯存至高可達 20GB。

這些 GPU 搭載最新的 NVIDIA Max-Q 和 RTX 技術，并由 NVIDIA Studio 平臺提供支持，在超過 110 個創(chuàng)意應用中實現(xiàn)了 RTX 優(yōu)化。此外，NVIDIA RTX GPU 借助 NVIDIA RTX Enterprise 驅動實現(xiàn)更高級別的穩(wěn)定性和性能，并可助力 Omniverse、Canvas 和 Broadcast 等由 AI 提供支持的 NVIDIA 獨家工具。

使用這些筆記本電腦 GPU 的專業(yè)人士可以使用先進技術，例如：至高可將幀率提升至前一代 4 倍的 DLSS 3，以及用于實時協(xié)作和仿真的 Omniverse Enterprise。

搭載 NVIDIA RTX GPU 的全新筆記本電腦和臺式電腦工作站將于本月起開始推出。

GTC 大會創(chuàng)意齊放

觀看 GTC 大會中更多鼓舞人心的內容、專家主導的會議和不容錯過的主題演講，加速您今后的創(chuàng)意工作。

實時觀看或點播觀看關于 Omniverse、AI 和 3D 工作流的會議：

• OpenAI 創(chuàng)始人 Ilya Sutskever 和黃仁勛先生的爐邊談話：今日 AI 與未來愿景 [S52092]

• 生成式 AI 如何轉變創(chuàng)意工作流：Adobe 的 Scott Belsky 和 NVIDIA 的 Bryan Catanzaro 的爐邊談話 [S52090]

• 揭秘生成式 AI [S52089]

• AI 輔助 3D：生成式 AI 將如何簡化虛擬世界構建 [S52163]

• 使用 AI 虛擬形象自定義構建世界：The Little Martians 科幻項目 [S51360]

• AI 助力、實時、無標記：動作捕捉的新時代 [S51845]

• 3D 與超越 3D：3D 藝術家如何在元宇宙中創(chuàng)造副業(yè) [SE52117]

• NVIDIA Omniverse 用戶組 [SE52047]

• 加速虛擬制作工作流，制作廣受好評的科幻短片 [S51496]

搜索 GTC 大會會議目錄并查看“媒體和娛樂”和 “Omniverse” 主題，以了解更多以創(chuàng)作者為中心的會議。

父女回家之旅

Adobe 的 Substance 3D 藝術和開發(fā)團隊創(chuàng)作的動畫短片 End of Summer 成功激發(fā)觀眾的強烈情感，這便是該團隊創(chuàng)作的初心。

“我們想要通過藝術作品來喚起觀眾的情感，讓他們感受到故事就在眼前發(fā)生，并讓他們對故事有自己的體驗?！?團隊成員 Wes McDermott 說道。

End of Summer 設計板。

End of Summer 是對 Laika 等定格動畫工作室的致敬，起初是內部的 Adobe Substance 3D 項目，旨在實現(xiàn)兩個目標。

首先，通過讓一批新人藝術家投身創(chuàng)意工作，鼓勵他們作為一個團隊協(xié)同工作。其次，測試這些藝術家的工作流功能集，以了解它們在 USD (Universal Scene Description) 框架方面的潛力。

End of Summer 的早期概念版本。

該小組將創(chuàng)建素材的任務劃分到多種最熱門 3D 應用中來完成，包括 Adobe Substance 3D Modeler、Autodesk 3ds Max、Autodesk Maya、Blender 和 Maxon 的 Cinema 4D。他們的 GeForce RTX GPU 在視窗中解鎖了 AI 降噪功能，以實現(xiàn)快速的交互式渲染和 GPU 加速濾鏡，從而加速和簡化材質創(chuàng)建。

“我們很快就發(fā)現(xiàn)了 USD 的強大之處，它不僅是一種導出格式，也是一種構建素材的方法?！?McDermott 說道，“USD 使團隊中的藝術家能夠使用他們最熟悉的任何 3D 應用?！?/p>

Adobe 團隊主要使用 Substance 3D 素材庫的材質、模型和燈光來創(chuàng)建工作室環(huán)境。所有紋理均在 Substance 3D Painter 中應用，其中 RTX 加速的光線和環(huán)境光遮蔽烘焙片刻內即可完成素材優(yōu)化。

然后，團隊將所有模型導入到 Omniverse USD Composer（舊稱 Create）中，所有人同時在其中優(yōu)化和組裝素材。

“當時也是在疫情期間，我們都被隔離在家中?！盡cDermott 說道，“這個項目讓我們可以進行團隊協(xié)作，有助于我們加強溝通并激發(fā)創(chuàng)造力?！?/p>

“在布置和設置場景布局以及了解 USD 工作流和協(xié)作方面，NVIDIA Omniverse 是一款出色的工具。我們使用繪畫和 NVIDIA PhysX 碰撞工具來放置素材?！薄?Wes McDermott

在 Omniverse USD Composer 中加速場景合成，并實時實現(xiàn) 3D 場景的組裝、仿真和渲染。

最后，藝術家們將場景導入至虛幻引擎，以作為添加光照和渲染所用的場景 （Stage）。

在虛幻引擎中進行最終場景編輯。

McDermott 強調了硬件在團隊工作流中的重要性。他說道：“Substance Painter 中的烘焙器采用 GPU 加速，并且從 NVIDIA RTX GPU 中受益。此外，我們也利用虛幻引擎和實時渲染完成大量工作?！?/p>

如需了解關于此工作流的更多信息，請觀看 GTC 大會會議：3D 藝術走向多人模式：Adobe Substance 團隊利用 Omniverse 完成 End of Summer 的幕后故事。

Adobe Substance 3D 團隊負責人兼藝術家 Wes McDermott。

掃描海報二維碼，或點擊“閱讀原文”，即可觀看 NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛 GTC23 主題演講重播！