设计之家 > 設計資訊 > 設計新聞 >

使用 NVIDIA Omniverse ACE 來構建 AI 虛擬形象

作者:NVIDIA 來源:設計之家 時間:2023-01-04

Omniverse Avatar Cloud Engine現已供搶先體驗,可用於進行交互式虛擬形象的自定義和部署。

 

 

構建虛擬形象和虛擬助手的開發者和團隊現可注冊加入 NVIDIA Omniverse Avatar Cloud Engine(ACE)搶先體驗計劃。這是一套雲原生 AI 微服務,可助力更輕鬆地大規模構建和部署智能虛擬助手和數字人。

Omniverse ACE 能夠簡化虛擬形象的開發,提供為任何虛擬形象添加智能和動畫所必需的 AI 構建模塊,可構建於幾乎任何引擎上,並部署於任何雲端。這些 AI 助手麵向各行各業,可助力組織增強當前工作流,並解鎖新的商機。

ACE 是數種生成式 AI 應用程序之一,可助力創作者加速 3D 世界和元宇宙的開發。加入該計劃的成員將獲得 NVIDIA AI 微服務預發布版本的訪問權限,以及為交互式虛擬形象應用程序開發雲原生 AI 工作流所需的工具和文檔。

 

借助 Omniverse ACE打造栩栩如生的交互式 AI 虛擬形象

虛擬形象的開發通常需要專業知識、專用設備和人工密集型工作流。為簡化虛擬形象的創建,Omniverse ACE 使 NVIDIA 的 AI 技術(包括預構建模型、工具集和特定領域的參考應用程序)能夠無縫集成到基於大多數引擎構建並部署在公共或私有雲上的虛擬形象應用程序中。

自 9 月推出以來,Omniverse ACE 已被分享至選定的合作夥伴以獲取早期反饋。現在,NVIDIA 正在尋找更多合作夥伴,期待他們提供有關微服務的反饋,合作改進產品,並在逼真的交互式數字人方麵突破創新。

搶先體驗計劃包括訪問 ACE 動畫 AI 和對話式 AI 微服務的預發布版本,包括:

●3D 動畫 AI 微服務:用於第三方虛擬形象,使用 Omniverse Audio2Face 生成式 AI,僅基於音頻文件來創建逼真的麵部動畫,使虛幻引擎和其他渲染工具中的角色能夠栩栩如生。

●2D 動畫 AI 微服務:名為 Live Portrait,可使用實時視頻源,輕鬆製作 2D 肖像或風格化人臉動畫。

●文本轉語音微服務:使用 NVIDIA Riva TTS,基於原始轉錄文字,無需任何額外信息(例如語音模式或節奏),即能合成聽起來自然的語音。

該計劃的成員還將獲得工具、示例參考應用程序和支持資源的訪問權限,這些將有助於成員著手啟動。

 

虛擬形象在各行各業得以應用

Omniverse ACE 可助力團隊構建交互式數字人,提升各行各業的體驗,提供:

簡單的角色動畫:使用戶隻需很少的專業知識,就能打造出栩栩如生的角色動畫。

雲端部署的能力:意味著虛擬形象幾乎可在任何地點使用,例如快餐店售貨亭、平板電腦或 VR 頭顯。

基於 NVIDIA 統一計算框架(UCF)構建的即插即用套件:可實現 NVIDIA AI 與其他解決方案之間的互操作性,確保最先進的 AI 能夠適用於所有用例。

Ready Player Me 和 Epic Games 等合作夥伴體驗了 Omniverse ACE 如何增強 AI 虛擬形象的工作流。

Omniverse ACE 動畫 AI 微服務支持來自 Ready Player Me 的 3D 角色,這是一個用於構建跨遊戲虛擬形象的平台。

Ready Player Me 首席執行官兼聯合創始人 Timmu Tõke 表示:“數字虛擬形象正在成為我們日常生活的重要組成部分。人們在遊戲、虛擬活動和社交應用程序中會使用虛擬形象,甚至會將其作為進入元宇宙的一種方式。我們花了七年時間,構建了完美的虛擬形象係統,讓開發者能夠輕鬆地集成到自己的應用程序和遊戲中,並讓用戶能夠創建一個虛擬形象來探索不同的世界。如今,借助 NVIDIA Omniverse ACE,團隊能夠更輕鬆地讓這些角色看起來栩栩如生。”

 

 

Epic Games 先進的 MetaHuman 技術改變了逼真、高保真數字人的創建。Omniverse ACE 與 MetaHuman 框架相結合,將使用戶能夠更輕鬆地設計和部署引人入勝的 3D 虛擬形象。

數字人不僅可以具有對話能力,也可以成為歌手,就像 AI 虛擬形象 Toy Jensen(簡稱 TJ)一樣。NVIDIA 的創意團隊迅速創作了一個 TJ 演唱《鈴兒響叮當》的動畫視頻,使用 Omniverse ACE 來提取歌手的聲音,並將其轉換為 TJ 的聲音。 這使虛擬形象能夠以與原始藝術家相同的音高和節奏來演唱。

 

 

許多創作者正在嚐試 VTubing,這是一種新的直播方式,用戶以 2D 虛擬形象出鏡並與觀眾互動。借助 Omniverse ACE,創作者可以將虛擬形象從 2D 動畫轉換為 3D,包括照片和風格化的頭像。用戶可從雲端渲染虛擬形象,在任何地點都能為角色製作動畫。

 

 

此外,NVIDIA Tokkio 參考應用程序正在擴展,早期合作夥伴正在為電信、銀行等行業構建雲原生客服虛擬形象。

 

加入搶先體驗計劃

構建虛擬形象和虛擬助手的開發者和團隊可搶先體驗 Omniverse ACE。

進一步了解 NVIDIA Omniverse ACE 並注冊加入搶先體驗計劃。

推薦設計

最新文章