NVIDIA宣布推出打造人工智慧虛擬化身的平台《NVIDIA Omniverse Avatar》實現即時對話式人工智慧助理

NVIDIA輝達於11/9宣布推出用於生成互動式AI人工智慧虛擬化身的NVIDIA Omniverse Avatar技術平台。Omniverse Avatar串連NVIDIA在語音AI、電腦視覺、自然語言理解、推薦引擎和模擬的技術。在該平台上打造的虛擬化身,是由光線追蹤3D繪圖所創造出的互動角色,能看、能說、能就各種主題進行對話,並能理解自然語意。

Omniverse Avatar為打造AI助理開啟一扇門,並能輕易地為各行各業量身打造。這些虛擬化身可以協助處理每天數十億筆的客戶服務互動內容,如餐廳訂單、銀行交易和個人預約等,進而帶來更大的商機並提高客戶滿意度。

NVIDIA創辦人暨執行長黃仁勳表示:「智慧虛擬助理的發展已嶄露曙光。Omniverse Avatar結合NVIDIA的基礎繪圖、模擬及AI技術,創造出一些史上最複雜的即時應用程式。協作機器人和虛擬助理的應用令人驚艷,且對未來影響深遠。」

Omniverse AvatarNVIDIA Omniverse的一部分,而Omniverse是一個用於3D工作流程的虛擬世界模擬和協作平台,目前為公開測試階段,並擁有超過7萬個用戶。執行長黃仁勳在NVIDIA GTC的主題演講中,分享了關於Omniverse Avatar的多個應用案例,包含用於客戶支援的Project Tokkio、用於24小時支援汽車智慧服務的NVIDIA DRIVE Concierge,以及用於視訊會議的Project Maxine

執行長黃仁勳在Project Tokkio的第一個展示中,展示與一個由複製他本人而做成的玩具虛擬化身與同事進行即時對話,談論包括生物學和氣候科學等主題。

Project Tokkio的第二個展示中,執行長黃仁勳將重點聚焦在餐廳自助服務機內的客服虛擬化身,當有兩位顧客在點素食漢堡、薯條和飲料時,虛擬化身能夠看見他們、進行對話,進而理解他們的需求。這些展示由NVIDIAAI軟體與Megatron 530B提供支援,Megatron 530B為當今全球最大的可客製化語言模型。

DRIVE Concierge AI平台上的展示中,位於儀表板中間螢幕上的數位助理能協助駕駛選擇最佳的駕駛模式,以準時抵達目的地,接著將能依照駕駛的需求設定提醒通知,於汽車限速低於100英里時提醒駕駛。

另外,執行長黃仁勳展示了Project Maxine為虛擬協作和內容創作應用程式,加入最先進的影音功能。當一位講英語的人在一間吵雜的咖啡廳進行視訊通話時,依舊能讓對方聽清楚她說的話,並且不被背景噪音干擾。當她說話時,她的一字一句皆會被轉錄成文字,並且翻譯成德語、法語和西班牙語,且和她的聲音及語調相同。

Omniverse Avatar的關鍵元素

Omniverse Avatar使用了語音AI、電腦視覺、自然語言理解、推薦引擎、臉部動畫與繪圖的元素,這些元素透過以下技術支援:

  • 語音辨識功能以NVIDIA Riva為基礎,該軟體開發套件可以辨識多種語言的語音。Riva還能透過文字轉語音的功能,生成類似人類的語音回應。
  • 自然語言理解是以Megatron 530B大型語言模型為基礎,能夠辨識、理解並生成人類語言。Megatron 530B是一個經過預先訓練的模型,可以在很少或沒有訓練的情況下完成句子、回答不同主題的大量問題、總結長篇且複雜的內容、翻譯成其它語言,以及處理多個未經過專門訓練的領域。
  • 推薦引擎由NVIDIA Merlin提供,企業可以使用此框架建立能處理大量資料的深度學習推薦系統,藉以提出更明智的建議。
  • 感知能力由用於影像分析的電腦視覺框架NVIDIA Metropolis提供。
  • 虛擬化身的動畫透過採用NVIDIA Video2Face與Audio2Face、由AI驅動的2D和3D臉部動畫,以及渲染技術製作而成。

NVIDIA將這些技術組成一個應用程式,並且透過NVIDIA Unified Compute Framework進行即時處理。這些技術整合成具擴充性、可客製化的微服務,並且透過NVIDIA Fleet Command在多個地點安全地部署、管理和協調。瞭解更多關於Omniverse Avatar的資訊。

免費報名參加NVIDIA GTC,以瞭解更多關於NVIDIA Omniverse的資訊,線上GTC將舉行至1111日。歡迎觀看NVIDIA創辦人暨執行長黃仁勳於119日發表的主題演講。

資料由NVIDIA與世紀奧美提供

延伸閱讀:
首搭1吋感光元件!Sony Xperia PRO-I實機亮相搶先看、台灣預計年底前上市
錶面更大、具血氧濃度偵測的Apple Watch Series 7開箱評測動手玩
公主遊輪宣布2021臺灣市場佈局!藍寶石公主號回歸、最新無接觸服務體驗與防疫大升級
Annette Edel女士接任台灣保時捷財務及資訊處長!