編輯注：本文是我們每周發(fā)布的 NVIDIA Studio 創(chuàng)意加速系列欄目的一部分，該系列旨在介紹一些特邀藝術家、提供創(chuàng)意提示和技巧，并展示 NVIDIA Studio 技術如何改善創(chuàng)意工作流。我們還將深入探討全新 GeForce RTX 40 系列 GPU 的性能、技術和資源，以及它們將如何顯著加速內容創(chuàng)作。

無論是塑造能展露情緒的逼真角色，還是將簡單的文本轉換成圖像，強大的 AI 技術正在徹底改變 3D 內容創(chuàng)作。

NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛先生在 GTC 大會主題演講中宣布了一系列旨在簡化創(chuàng)作者工作流的改進，包括將生成式 AI 與 Omniverse Audio2Face 應用結合使用。

NVIDIA Omniverse 作為創(chuàng)建和處理元宇宙應用的平臺，已通過更新的虛幻引擎連接器、開放測試版 Unity 連接器和新的 SimReady 3D 素材實現(xiàn)進一步擴展。

全新 NVIDIA RTX GPU 采用 Ada Lovelace 架構，可為新一代筆記本電腦和臺式電腦工作站提供強勁動力，從而滿足 AI、設計和工業(yè)元宇宙的需求。

3 月版 NVIDIA Studio 驅動增加了對熱門 RTX 視頻超分辨率功能的支持，該功能現(xiàn)已可用于 GeForce RTX 40 和 30 系列 GPU。

在“NVIDIA Studio 創(chuàng)意加速” 欄目中，Adobe Substance 3D 藝術和開發(fā)團隊將介紹他們使用 Omniverse USD Composer（舊稱 Create）合作創(chuàng)作動畫短片 End of Summer 的過程。

Omniverse 更新大放異彩

即使創(chuàng)作者缺乏豐富的專業(yè)技術，他們依然可以借助專業(yè)的生成式 AI 工具提高工作效率。相較于傳統(tǒng)資產(chǎn)開發(fā)，生成式 AI 只需少量時間和成本，即可將創(chuàng)意轉變?yōu)楝F(xiàn)實，創(chuàng)造高質量、快速迭代的體驗。

AI 驅動的 Omniverse Audio2Face 應用僅使用音頻文件即可生成逼真的面部動畫，可以取代以往乏味的手動創(chuàng)建過程，以提高 3D 藝術家為配角制作動畫的效率。

此應用的最新版本在質量、可用性和性能方面實現(xiàn)了顯著升級，添加了新的 headless 模式和 REST API，使游戲開發(fā)者和其他創(chuàng)作者能夠在數(shù)據(jù)中心運行該應用，并處理來自多個用戶的大量音頻文件。

NVIDIA 為 Unity 工作流開發(fā)的全新 Omniverse 連接器已進入公測階段。創(chuàng)作者可以直接將 Unity 場景添加到 Omniverse Nucleus 服務器上，而且可以使用 DeepSearch 工具、縮略圖、書簽等平臺功能。單向實時同步工作流可實現(xiàn)實時更新。

虛幻引擎連接器已推出最新版本，Omniverse 用戶現(xiàn)在可以使用其中的 USD 導入功能導入骨架網(wǎng)格blendshape，并使用 Python USD 綁定在 Omniverse Nucleus 上訪問場景（Stage）。此版本還優(yōu)化了導入、導出和實時工作流，并更新了軟件開發(fā)套件。

此外，創(chuàng)作者還可使用超過 1000 種全新 SimReady 素材。SimReady 素材按照物體在現(xiàn)實世界的比例構建，擁有精確的質量、物理材質和重心，可以在 Omniverse PhysX 引擎中使用，以實現(xiàn)非常逼真的視覺效果和準確無誤的運動軌跡。

三月版 Studio 驅動帶來炫目超分辨率

盡管硬件的處理性能足夠，但是 NVIDIA RTX GPU 用戶觀看的在線視頻中，超過 90% 為 1080p 或更低的分辨率，并且放大后的畫質還會進一步降低。

解決方案：RTX 視頻超分辨率。此新功能利用 AI 提高通過 Google Chrome 和 Microsoft Edge 瀏覽器串流的任何視頻的質量，現(xiàn)已在 GeForce RTX 30 和 40 系列 GPU 上可用。

單擊圖像，查看雙三次上采樣（左）和 RTX 視頻超分辨率之間的區(qū)別。

該功能提高了視頻的銳度和清晰度，讓用戶即使在高分辨率顯示器上，也能夠以原生分辨率觀看在線內容。

RTX 視頻超分辨率功能現(xiàn)已在 3 月版 Studio 驅動上推出，即日起即可下載。

全新 NVIDIA RTX GPU 助力專業(yè)創(chuàng)作者

六個基于 Ada Lovelace 架構的全新專業(yè)級 NVIDIA RTX GPU 使創(chuàng)作者能夠使用筆記本電腦和臺式電腦滿足超復雜工作負載的需求。

NVIDIA RTX 5000、RTX 4000、RTX 3500、RTX 3000 和 RTX 2000 Ada Generation 筆記本電腦 GPU 的性能相較上一代至高可達 2 倍。NVIDIA RTX 4000 小型 (SFF) Ada Generation 臺式電腦 GPU 配備全新 RT Core、Tensor Core 和 CUDA Core，顯存至高可達 20GB。

這些 GPU 搭載最新的 NVIDIA Max-Q 和 RTX 技術，并由 NVIDIA Studio 平臺提供支持，在超過 110 個創(chuàng)意應用中實現(xiàn)了 RTX 優(yōu)化。此外，NVIDIA RTX GPU 借助 NVIDIA RTX Enterprise 驅動實現(xiàn)更高級別的穩(wěn)定性和性能，并可助力 Omniverse、Canvas 和 Broadcast 等由 AI 提供支持的 NVIDIA 獨家工具。

使用這些筆記本電腦 GPU 的專業(yè)人士可以使用先進技術，例如：至高可將幀率提升至前一代 4 倍的 DLSS 3，以及用于實時協(xié)作和仿真的 Omniverse Enterprise。

搭載 NVIDIA RTX GPU 的全新筆記本電腦和臺式電腦工作站將于本月起開始推出。

GTC 大會創(chuàng)意齊放

觀看 GTC 大會中更多鼓舞人心的內容、專家主導的會議和不容錯過的主題演講，加速您今后的創(chuàng)意工作。

實時觀看或點播觀看關于 Omniverse、AI 和 3D 工作流的會議：

• OpenAI 創(chuàng)始人 Ilya Sutskever 和黃仁勛先生的爐邊談話：今日 AI 與未來愿景 [S52092]

• 生成式 AI 如何轉變創(chuàng)意工作流：Adobe 的 Scott Belsky 和 NVIDIA 的 Bryan Catanzaro 的爐邊談話 [S52090]

• 揭秘生成式 AI [S52089]

• AI 輔助 3D：生成式 AI 將如何簡化虛擬世界構建 [S52163]

• 使用 AI 虛擬形象自定義構建世界：The Little Martians 科幻項目 [S51360]

• AI 助力、實時、無標記：動作捕捉的新時代 [S51845]

• 3D 與超越 3D：3D 藝術家如何在元宇宙中創(chuàng)造副業(yè) [SE52117]

• NVIDIA Omniverse 用戶組 [SE52047]

• 加速虛擬制作工作流，制作廣受好評的科幻短片 [S51496]

搜索 GTC 大會會議目錄并查看“媒體和娛樂”和 “Omniverse” 主題，以了解更多以創(chuàng)作者為中心的會議。

父女回家之旅

Adobe 的 Substance 3D 藝術和開發(fā)團隊創(chuàng)作的動畫短片 End of Summer 成功激發(fā)觀眾的強烈情感，這便是該團隊創(chuàng)作的初心。

“我們想要通過藝術作品來喚起觀眾的情感，讓他們感受到故事就在眼前發(fā)生，并讓他們對故事有自己的體驗?！?團隊成員 Wes McDermott 說道。

End of Summer 設計板。

End of Summer 是對 Laika 等定格動畫工作室的致敬，起初是內部的 Adobe Substance 3D 項目，旨在實現(xiàn)兩個目標。

首先，通過讓一批新人藝術家投身創(chuàng)意工作，鼓勵他們作為一個團隊協(xié)同工作。其次，測試這些藝術家的工作流功能集，以了解它們在 USD (Universal Scene Description) 框架方面的潛力。

End of Summer 的早期概念版本。

該小組將創(chuàng)建素材的任務劃分到多種最熱門 3D 應用中來完成，包括 Adobe Substance 3D Modeler、Autodesk 3ds Max、Autodesk Maya、Blender 和 Maxon 的 Cinema 4D。他們的 GeForce RTX GPU 在視窗中解鎖了 AI 降噪功能，以實現(xiàn)快速的交互式渲染和 GPU 加速濾鏡，從而加速和簡化材質創(chuàng)建。

“我們很快就發(fā)現(xiàn)了 USD 的強大之處，它不僅是一種導出格式，也是一種構建素材的方法。” McDermott 說道，“USD 使團隊中的藝術家能夠使用他們最熟悉的任何 3D 應用?！?/p>

Adobe 團隊主要使用 Substance 3D 素材庫的材質、模型和燈光來創(chuàng)建工作室環(huán)境。所有紋理均在 Substance 3D Painter 中應用，其中 RTX 加速的光線和環(huán)境光遮蔽烘焙片刻內即可完成素材優(yōu)化。

然后，團隊將所有模型導入到 Omniverse USD Composer（舊稱 Create）中，所有人同時在其中優(yōu)化和組裝素材。

“當時也是在疫情期間，我們都被隔離在家中?！盡cDermott 說道，“這個項目讓我們可以進行團隊協(xié)作，有助于我們加強溝通并激發(fā)創(chuàng)造力。”

“在布置和設置場景布局以及了解 USD 工作流和協(xié)作方面，NVIDIA Omniverse 是一款出色的工具。我們使用繪畫和 NVIDIA PhysX 碰撞工具來放置素材?！薄?Wes McDermott

在 Omniverse USD Composer 中加速場景合成，并實時實現(xiàn) 3D 場景的組裝、仿真和渲染。

最后，藝術家們將場景導入至虛幻引擎，以作為添加光照和渲染所用的場景 （Stage）。

在虛幻引擎中進行最終場景編輯。

McDermott 強調了硬件在團隊工作流中的重要性。他說道：“Substance Painter 中的烘焙器采用 GPU 加速，并且從 NVIDIA RTX GPU 中受益。此外，我們也利用虛幻引擎和實時渲染完成大量工作。”

如需了解關于此工作流的更多信息，請觀看 GTC 大會會議：3D 藝術走向多人模式：Adobe Substance 團隊利用 Omniverse 完成 End of Summer 的幕后故事。

Adobe Substance 3D 團隊負責人兼藝術家 Wes McDermott。

掃描海報二維碼，或點擊“閱讀原文”，即可觀看 NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛 GTC23 主題演講重播！