NVIDIA 憑借 3D 生成式 AI 和 RTX Remix，開啟 Omniverse 的大門

現已麵向數百萬 GeForce RTX 用戶,提供全新 Blender AI 插件、Ada Lovelace 支持以及數千種免費 3D USD 資產

無論是創造能夠表達原始情感的逼真數字人,還是構建身臨其境的虛擬世界,全球設計、工程、創意和其他行業的人士都在通過 3D 工作流,力求再創新高。

動畫師、創作者和開發者可使用全新 AI 工具,對 3D 環境、仿真模擬、以及元宇宙(互聯網的 3D 演進)展開全新的構想。

NVIDIA Omniverse 平台基於通用場景描述(USD)框架,支持元宇宙應用程序的開發。該平台正在通過 Blender 增強功能和一套麵向 3D 藝術家的全新實驗性生成式 AI 工具進行擴展。

NVIDIA 在 CES 特別演講中發布了這些功能,同時發布的還有 NVIDIA Studio 筆記本電腦上的Omniverse 預裝,以及數千種免費的全新 USD 資產。這些發布都致力於推動 3D 工作流的加速采用。

圖片說明:NVIDIA Studio 3D 創作者 Jeremy Lightcap、Edward McEvenue、Rafi Nizam、Jae Solina、Pekka Varis、Shangyu Wang、Ashley Goldstein 借助 Omniverse ,采用多款 3D 設計工具,在多個 RTX 係統上展開的跨時區協作。

此外,Blender 的新版本現已在 Omniverse Launcher 中提供,可為全球各地的 Blender 用戶帶來 3D 生成式 AI 功能。一個全新的麵板使 Blender 用戶能夠輕鬆地傳輸形態鍵和綁定的角色。現可通過 Omniverse Audio2Face (可基於音頻文件自動生成逼真麵部表情的 AI 工具)的一鍵式操作,解決重新連接綁定角色頭像的難題。

另一用於場景優化的新麵板可助力用戶更輕鬆地在多應用程序 3D 工作流中實時創建 USD 場景。

此外,Audio2Face、Audio2Gesture 和 Audio2Emotion 等打造即時 3D 角色動畫的生成式 AI 工具也實現了性能的升級,使開發者和創作者能夠更輕鬆地將其集成到當前的 3D 管線中。

創作者可使用 Audio2Face,基於音頻文件生成麵部表情;使用 Audio2Emotion,生成從快樂和興奮到悲傷和遺憾的逼真情緒;使用 Audio2Gesture,實現逼真的上半身動作。這些基於音頻打造動畫的工具對於 3D 藝術家來說頗具顛覆性,使其能夠告別繁瑣的手動任務。

如今,更多的創意和技術領域的專業人士開始采用 AI 輔助創作者工具。此前,NVIDIA Canvas 的推出使藝術家能夠無縫地生成景觀,並通過簡單的筆觸和 AI 來對其進行迭代。很快,所有 RTX 用戶就能下載 Canvas 的更新,采用 360 度環繞圖像來創建全景環境和華麗的圖像以及進行概念化。AI ToyBox 具有源自 NVIDIA Research 的擴展功能,使創作者能夠基於 2D 輸入生成 3D 網格。

Omniverse 強大的 AI 工具能夠將任務化繁為簡,不同能力水平的創作者都可以利用這些資源來創作高質量的作品,以應對元宇宙中對內容和虛擬世界不斷增長的需求。

“對 3D 技能的需求正在飆升,但學習 3D 對某些人來說可能非常艱難,而且相當耗時,” Jae Solina (JSFilmz)說道,“但這些平台的最新發展不僅讓創作者和專業技術人士能夠繼續使用自己慣用的3D工具,還能提升藝術創造力,甚至利用 AI 在工作流中為其提供協助。”

Omniverse Launcher 是下載 Omniverse 內容和參考應用程序的門戶,也已向係統構建者開放,以便於其進行預裝,從而使 3D 創作者能夠在 NVIDIA Studio 驗證的筆記本電腦上獲得優化的開箱即用體驗。技嘉科技和 AORUS 將於 2023 年率先推出首批預裝 Omniverse Launcher 的筆記本電腦,讓更多 3D 內容創作者能夠訪問這一平台。

NVIDIA RTX Remix 是一個基於 Omniverse 的免費改裝平台,可助力改裝者快速創建並分享經典遊戲的#RTXON 模組,且每個模組都具有完整的光線追蹤、增強的材質、NVIDIA DLSS 3 和 NVIDIA Reflex。其搶先體驗版本即將推出。令人驚歎的“傳送門(Portal)”RTX版是使用 RTX Remix 構建的,為展示改裝者在其模組中啟用 RTX 是多麼輕鬆,我們與 “傳送門:序曲(Portal: Prelude)”(2008 年發布的非官方“傳送門”前傳)的原始創建者分享了 RTX Remix。

Omniverse 用戶還可以訪問數以千計的全新免費 USD 資產,包括基於 USD 的NVIDIA RTX “我的世界(Minecraft)”冬季世界體驗,並學習如何創建自己的 NVIDIA SimReady 資產以進行複雜的模擬構建。使用 Omniverse,創作者可使用常用工具(例如 Autodesk Maya、Autodesk 3ds Max、Blender、Adobe Substance 3D Painter 等),通過 AI、模擬工具和實時 RTX 加速渲染來增強現有工作流。

各類 3D 創作者均可利用這些新工具,在 3D 模擬和虛擬世界構建方麵實現突破創新。借助音頻轉動畫工具、生成式 AI 和元宇宙,用戶就能對數字世界展開新的構想,並充分發揮創造力,創作出栩栩如生的角色。

Omniverse平台的最新更新

Omniverse 的最新更新包括:

●Unity Omniverse Connector 可供搶先體驗。

●Blender alpha 版本現可在 Omniverse Launcher 中使用,使用戶能夠修複幾何體,生成自動 UV,並將高分辨率 CAD 數據抽取為更多可用的多邊形。

●Audio2Face、Audio2Emotion 和Audio2Gesture 的更新能夠更好地實現即時且逼真的角色動畫,現可在Omniverse Audio2Face 和Omniverse Machinima 中使用。

●NVIDIA Canvas 的功能更新版本很快即將在 Omniverse Launcher 上線,可通過簡單的筆觸來創建 360 度全景。用戶可將環境導入 3D 應用程序,以對不同的設置和光照進行測試。

●AI ToyBox 實驗工具由 NVIDIA Research 構建,其中包括 GET3D,這是一種 Omniverse 擴展,可基於 2D 圖像生成可訓練的 3D 模型,使開發者能夠使用自己的數據集,快速創建 3D 虛擬世界模型,現已在 Omniverse Extension Manager 中提供。

●數以千計的全新免費 3D 資產現已在全球範圍內提供,供用戶在 Omniverse 中進行構建和創作。

觀看 NVIDIA 在 CES 上的特別演講。

創作者可免費下載 NVIDIA Omniverse,將作品提交到 NVIDIA Omniverse Gallery,並通過論壇等查找資源。