NVIDIA發布用於創建AI虛擬形象的平台

美國加利福尼亞州聖克拉拉——GTC大會——2021年11月9日——NVIDIA於今日發布用於生成交互式AI虛擬形象的技術平台——NVIDIA Omniverse Avatar。

Omniverse Avatar能夠連接NVIDIA在語音AI、計算機視覺、自然語言理解、推薦引擎和模擬方麵的技術。在該平台上創建的虛擬形象是具有光線追蹤3D圖像效果的交互式角色,可以看到、說話、談論各種主題,以及合理地理解表達意圖。

Omniverse Avatar為AI助手的創建開辟了道路,而且可以根據各個行業的需求輕鬆定製。AI助手可以幫助處理數十億次日常客戶服務互動,比如餐廳訂單,銀行交易,個人預約和預訂等,帶來更多商機並提升客戶滿意度。

NVIDIA創始人兼首席執行官黃仁勳表示:“智能虛擬助手的前景一片光明。Omniverse Avatar將我們的基礎圖像、模擬和AI技術結合在一起,打造出一些有史以來最複雜的實時應用。協作機器人和虛擬助手的案例令人難以置信,影響深遠。”

Omniverse Avatar是用於3D工作流程的虛擬世界模擬和協作平台——NVIDIA Omniverse™的一部分,Omniverse公測版用戶現已超過7萬人。

在NVIDIA GTC主題演講中,黃仁勳分享了使用Omniverse Avatar的多個例子,包括用於客戶支持的Project Tokkio、用於永久在線車載智能服務的NVIDIA DRIVE Concierge以及用於視頻會議的Project Maxine。

在第一個Project Tokkio演示中,黃仁勳展示了NVIDIA的同事們與一個黃仁勳的卡通虛擬形象進行互動——就生物學和氣候科學等話題開展對話。

在第二個Project Tokkio演示中,黃仁勳著重介紹了餐廳自助服務亭中的一個客戶服務虛擬形象。演示中,有兩名顧客正在訂購素食漢堡、薯條和飲料,該虛擬形象看到了他們、與他們交談並理解了他們。這些演示由NVIDIA AI軟件和目前全球最大的可定製語言模型——Megatron 530B驅動。

在DRIVE Concierge AI平台演示中,中央儀表盤屏幕上的數字助理幫助駕駛者選擇了最佳駕駛模式以準時到達目的地,然後按照駕駛者的要求,設置在汽車續航裏程下降到100英裏以下時進行提醒。

另外,黃仁勳還展示了Project Maxine如何為虛擬協作和內容創作應用增加最先進的視頻和音頻功能。演示中,一個講英語的人在嘈雜的咖啡館裏進行視頻通話,但是其他人可以清楚地聽到她所說的話,沒有背景噪音。當她講話時,她的話被實時轉錄並翻譯成德語、法語和西班牙語,並且聲音和語調與原話完全相同。

Omniverse Avatar主要組成部分

Omniverse Avatar 所使用的語音AI、計算機視覺、自然語言理解、推薦引擎、麵部動畫和圖像元素,通過以下技術實現:

·其語音識別基於NVIDIA Riva。這個軟件開發工具包可以識別多種語言的語音。Riva還可通過文本語音轉換功能生成接近真人的語音反饋。

·其自然語言理解基於Megatron 530B大型語言模型。該模型可以識別、理解和生成人類語言。Megatron 530B是一個預訓練模型,它可以在很少或沒有訓練的情況下完成句子、回答主題廣泛的問題、總結長而複雜的故事、翻譯成其他語言,並應對許多它未接受過專門訓練的情景。

·其推薦引擎由NVIDIA Merlin™提供。該框架使企業可以建立能夠處理大量數據的深度學習推薦係統,以提出更明智的建議。

·其感知功能來自用於視頻分析的計算機視覺框架——NVIDIA Metropolis。

·其虛擬形象動畫由AI賦能的2D和3D麵部動畫和渲染技術——NVIDIA Video2Face和Audio2Face™驅動。

這些技術被集成在一個應用,並使用NVIDIA統一計算框架進行實時處理。這些技術被打包成可擴展、自定義微服務後,能夠通過NVIDIA Fleet Command™在多個地點安全地部署、管理和協調。

進一步了解Omniverse Avatar。

免費注冊後可在11月8日至11日舉行的NVIDIA GTC大會上進一步了解NVIDIA Omniverse,並在11月9日觀看NVIDIA創始人兼首席執行官黃仁勳的GTC主題演講(也可在之後觀看重播)。

關於NVIDIA

NVIDIA(納斯達克股票代碼:NVDA)在1999年發明的GPU激發了PC遊戲市場的增長,重新定義了現代計算機顯卡、高性能計算和人工智能。NVIDIA公司在加速計算和人工智能領域的創新研究成果正在改變交通運輸、醫療、製造等萬億美元級行業,並推動許多其他行業的發展。更多信息,請訪問https://nvidianews.nvidia.com/。