編輯注：本文是我們每周發(fā)布的 NVIDIA Studio 創(chuàng)意加速系列欄目的一部分，該系列旨在介紹一些特邀藝術(shù)家、提供創(chuàng)意提示和技巧，并展示 NVIDIA Studio 技術(shù)如何改善創(chuàng)意工作流。我們還將深入探討全新 GeForce RTX 40 系列 GPU 的性能、技術(shù)和資源，以及它們將如何顯著加速內(nèi)容創(chuàng)作。

無論是塑造能展露情緒的逼真角色，還是將簡單的文本轉(zhuǎn)換成圖像，強(qiáng)大的 AI 技術(shù)正在徹底改變 3D 內(nèi)容創(chuàng)作。

NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛先生在 GTC 大會(huì)主題演講中宣布了一系列旨在簡化創(chuàng)作者工作流的改進(jìn)，包括將生成式 AI 與 Omniverse Audio2Face 應(yīng)用結(jié)合使用。

NVIDIA Omniverse 作為創(chuàng)建和處理元宇宙應(yīng)用的平臺(tái)，已通過更新的虛幻引擎連接器、開放測(cè)試版 Unity 連接器和新的 SimReady 3D 素材實(shí)現(xiàn)進(jìn)一步擴(kuò)展。

全新 NVIDIA RTX GPU 采用 Ada Lovelace 架構(gòu)，可為新一代筆記本電腦和臺(tái)式電腦工作站提供強(qiáng)勁動(dòng)力，從而滿足 AI、設(shè)計(jì)和工業(yè)元宇宙的需求。

3 月版 NVIDIA Studio 驅(qū)動(dòng)增加了對(duì)熱門 RTX 視頻超分辨率功能的支持，該功能現(xiàn)已可用于 GeForce RTX 40 和 30 系列 GPU。

在“NVIDIA Studio 創(chuàng)意加速” 欄目中，Adobe Substance 3D 藝術(shù)和開發(fā)團(tuán)隊(duì)將介紹他們使用 Omniverse USD Composer（舊稱 Create）合作創(chuàng)作動(dòng)畫短片 End of Summer 的過程。

Omniverse 更新大放異彩

即使創(chuàng)作者缺乏豐富的專業(yè)技術(shù)，他們依然可以借助專業(yè)的生成式 AI 工具提高工作效率。相較于傳統(tǒng)資產(chǎn)開發(fā)，生成式 AI 只需少量時(shí)間和成本，即可將創(chuàng)意轉(zhuǎn)變?yōu)楝F(xiàn)實(shí)，創(chuàng)造高質(zhì)量、快速迭代的體驗(yàn)。

AI 驅(qū)動(dòng)的 Omniverse Audio2Face 應(yīng)用僅使用音頻文件即可生成逼真的面部動(dòng)畫，可以取代以往乏味的手動(dòng)創(chuàng)建過程，以提高 3D 藝術(shù)家為配角制作動(dòng)畫的效率。

此應(yīng)用的最新版本在質(zhì)量、可用性和性能方面實(shí)現(xiàn)了顯著升級(jí)，添加了新的 headless 模式和 REST API，使游戲開發(fā)者和其他創(chuàng)作者能夠在數(shù)據(jù)中心運(yùn)行該應(yīng)用，并處理來自多個(gè)用戶的大量音頻文件。

NVIDIA 為 Unity 工作流開發(fā)的全新 Omniverse 連接器已進(jìn)入公測(cè)階段。創(chuàng)作者可以直接將 Unity 場(chǎng)景添加到 Omniverse Nucleus 服務(wù)器上，而且可以使用 DeepSearch 工具、縮略圖、書簽等平臺(tái)功能。單向?qū)崟r(shí)同步工作流可實(shí)現(xiàn)實(shí)時(shí)更新。

虛幻引擎連接器已推出最新版本，Omniverse 用戶現(xiàn)在可以使用其中的 USD 導(dǎo)入功能導(dǎo)入骨架網(wǎng)格blendshape，并使用 Python USD 綁定在 Omniverse Nucleus 上訪問場(chǎng)景（Stage）。此版本還優(yōu)化了導(dǎo)入、導(dǎo)出和實(shí)時(shí)工作流，并更新了軟件開發(fā)套件。

此外，創(chuàng)作者還可使用超過 1000 種全新 SimReady 素材。SimReady 素材按照物體在現(xiàn)實(shí)世界的比例構(gòu)建，擁有精確的質(zhì)量、物理材質(zhì)和重心，可以在 Omniverse PhysX 引擎中使用，以實(shí)現(xiàn)非常逼真的視覺效果和準(zhǔn)確無誤的運(yùn)動(dòng)軌跡。

三月版 Studio 驅(qū)動(dòng)帶來炫目超分辨率

盡管硬件的處理性能足夠，但是 NVIDIA RTX GPU 用戶觀看的在線視頻中，超過 90% 為 1080p 或更低的分辨率，并且放大后的畫質(zhì)還會(huì)進(jìn)一步降低。

解決方案：RTX 視頻超分辨率。此新功能利用 AI 提高通過 Google Chrome 和 Microsoft Edge 瀏覽器串流的任何視頻的質(zhì)量，現(xiàn)已在 GeForce RTX 30 和 40 系列 GPU 上可用。

單擊圖像，查看雙三次上采樣（左）和 RTX 視頻超分辨率之間的區(qū)別。

該功能提高了視頻的銳度和清晰度，讓用戶即使在高分辨率顯示器上，也能夠以原生分辨率觀看在線內(nèi)容。

RTX 視頻超分辨率功能現(xiàn)已在 3 月版 Studio 驅(qū)動(dòng)上推出，即日起即可下載。

全新 NVIDIA RTX GPU 助力專業(yè)創(chuàng)作者

六個(gè)基于 Ada Lovelace 架構(gòu)的全新專業(yè)級(jí) NVIDIA RTX GPU 使創(chuàng)作者能夠使用筆記本電腦和臺(tái)式電腦滿足超復(fù)雜工作負(fù)載的需求。

NVIDIA RTX 5000、RTX 4000、RTX 3500、RTX 3000 和 RTX 2000 Ada Generation 筆記本電腦 GPU 的性能相較上一代至高可達(dá) 2 倍。NVIDIA RTX 4000 小型 (SFF) Ada Generation 臺(tái)式電腦 GPU 配備全新 RT Core、Tensor Core 和 CUDA Core，顯存至高可達(dá) 20GB。

這些 GPU 搭載最新的 NVIDIA Max-Q 和 RTX 技術(shù)，并由 NVIDIA Studio 平臺(tái)提供支持，在超過 110 個(gè)創(chuàng)意應(yīng)用中實(shí)現(xiàn)了 RTX 優(yōu)化。此外，NVIDIA RTX GPU 借助 NVIDIA RTX Enterprise 驅(qū)動(dòng)實(shí)現(xiàn)更高級(jí)別的穩(wěn)定性和性能，并可助力 Omniverse、Canvas 和 Broadcast 等由 AI 提供支持的 NVIDIA 獨(dú)家工具。

使用這些筆記本電腦 GPU 的專業(yè)人士可以使用先進(jìn)技術(shù)，例如：至高可將幀率提升至前一代 4 倍的 DLSS 3，以及用于實(shí)時(shí)協(xié)作和仿真的 Omniverse Enterprise。

搭載 NVIDIA RTX GPU 的全新筆記本電腦和臺(tái)式電腦工作站將于本月起開始推出。

GTC 大會(huì)創(chuàng)意齊放

觀看 GTC 大會(huì)中更多鼓舞人心的內(nèi)容、專家主導(dǎo)的會(huì)議和不容錯(cuò)過的主題演講，加速您今后的創(chuàng)意工作。

實(shí)時(shí)觀看或點(diǎn)播觀看關(guān)于 Omniverse、AI 和 3D 工作流的會(huì)議：

• OpenAI 創(chuàng)始人 Ilya Sutskever 和黃仁勛先生的爐邊談話：今日 AI 與未來愿景 [S52092]

• 生成式 AI 如何轉(zhuǎn)變創(chuàng)意工作流：Adobe 的 Scott Belsky 和 NVIDIA 的 Bryan Catanzaro 的爐邊談話 [S52090]

• 揭秘生成式 AI [S52089]

• AI 輔助 3D：生成式 AI 將如何簡化虛擬世界構(gòu)建 [S52163]

• 使用 AI 虛擬形象自定義構(gòu)建世界：The Little Martians 科幻項(xiàng)目 [S51360]

• AI 助力、實(shí)時(shí)、無標(biāo)記：動(dòng)作捕捉的新時(shí)代 [S51845]

• 3D 與超越 3D：3D 藝術(shù)家如何在元宇宙中創(chuàng)造副業(yè) [SE52117]

• NVIDIA Omniverse 用戶組 [SE52047]

• 加速虛擬制作工作流，制作廣受好評(píng)的科幻短片 [S51496]

搜索 GTC 大會(huì)會(huì)議目錄并查看“媒體和娛樂”和 “Omniverse” 主題，以了解更多以創(chuàng)作者為中心的會(huì)議。

父女回家之旅

Adobe 的 Substance 3D 藝術(shù)和開發(fā)團(tuán)隊(duì)創(chuàng)作的動(dòng)畫短片 End of Summer 成功激發(fā)觀眾的強(qiáng)烈情感，這便是該團(tuán)隊(duì)創(chuàng)作的初心。

“我們想要通過藝術(shù)作品來喚起觀眾的情感，讓他們感受到故事就在眼前發(fā)生，并讓他們對(duì)故事有自己的體驗(yàn)?！?團(tuán)隊(duì)成員 Wes McDermott 說道。

End of Summer 設(shè)計(jì)板。

End of Summer 是對(duì) Laika 等定格動(dòng)畫工作室的致敬，起初是內(nèi)部的 Adobe Substance 3D 項(xiàng)目，旨在實(shí)現(xiàn)兩個(gè)目標(biāo)。

首先，通過讓一批新人藝術(shù)家投身創(chuàng)意工作，鼓勵(lì)他們作為一個(gè)團(tuán)隊(duì)協(xié)同工作。其次，測(cè)試這些藝術(shù)家的工作流功能集，以了解它們?cè)?USD (Universal Scene Description) 框架方面的潛力。

End of Summer 的早期概念版本。

該小組將創(chuàng)建素材的任務(wù)劃分到多種最熱門 3D 應(yīng)用中來完成，包括 Adobe Substance 3D Modeler、Autodesk 3ds Max、Autodesk Maya、Blender 和 Maxon 的 Cinema 4D。他們的 GeForce RTX GPU 在視窗中解鎖了 AI 降噪功能，以實(shí)現(xiàn)快速的交互式渲染和 GPU 加速濾鏡，從而加速和簡化材質(zhì)創(chuàng)建。

“我們很快就發(fā)現(xiàn)了 USD 的強(qiáng)大之處，它不僅是一種導(dǎo)出格式，也是一種構(gòu)建素材的方法。” McDermott 說道，“USD 使團(tuán)隊(duì)中的藝術(shù)家能夠使用他們最熟悉的任何 3D 應(yīng)用?！?/p>

Adobe 團(tuán)隊(duì)主要使用 Substance 3D 素材庫的材質(zhì)、模型和燈光來創(chuàng)建工作室環(huán)境。所有紋理均在 Substance 3D Painter 中應(yīng)用，其中 RTX 加速的光線和環(huán)境光遮蔽烘焙片刻內(nèi)即可完成素材優(yōu)化。

然后，團(tuán)隊(duì)將所有模型導(dǎo)入到 Omniverse USD Composer（舊稱 Create）中，所有人同時(shí)在其中優(yōu)化和組裝素材。

“當(dāng)時(shí)也是在疫情期間，我們都被隔離在家中?！盡cDermott 說道，“這個(gè)項(xiàng)目讓我們可以進(jìn)行團(tuán)隊(duì)協(xié)作，有助于我們加強(qiáng)溝通并激發(fā)創(chuàng)造力。”

“在布置和設(shè)置場(chǎng)景布局以及了解 USD 工作流和協(xié)作方面，NVIDIA Omniverse 是一款出色的工具。我們使用繪畫和 NVIDIA PhysX 碰撞工具來放置素材?！薄?Wes McDermott

在 Omniverse USD Composer 中加速場(chǎng)景合成，并實(shí)時(shí)實(shí)現(xiàn) 3D 場(chǎng)景的組裝、仿真和渲染。

最后，藝術(shù)家們將場(chǎng)景導(dǎo)入至虛幻引擎，以作為添加光照和渲染所用的場(chǎng)景 （Stage）。

在虛幻引擎中進(jìn)行最終場(chǎng)景編輯。

McDermott 強(qiáng)調(diào)了硬件在團(tuán)隊(duì)工作流中的重要性。他說道：“Substance Painter 中的烘焙器采用 GPU 加速，并且從 NVIDIA RTX GPU 中受益。此外，我們也利用虛幻引擎和實(shí)時(shí)渲染完成大量工作?！?/p>

如需了解關(guān)于此工作流的更多信息，請(qǐng)觀看 GTC 大會(huì)會(huì)議：3D 藝術(shù)走向多人模式：Adobe Substance 團(tuán)隊(duì)利用 Omniverse 完成 End of Summer 的幕后故事。

Adobe Substance 3D 團(tuán)隊(duì)負(fù)責(zé)人兼藝術(shù)家 Wes McDermott。

掃描海報(bào)二維碼，或點(diǎn)擊“閱讀原文”，即可觀看 NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛 GTC23 主題演講重播！