NVIDIA Agent Toolkit新增Omniverse函式庫 讓AI代理建構模擬就緒的世界

NVIDIA 2026-01.jpg

NVIDIA於2026年7月20日宣布,NVIDIA Agent Toolkit現已涵蓋NVIDIA Omniverse函式庫。這套軟體元件集合能為人工智慧(AI)代理提供工具與技能,協助既有應用程式加入物理AI功能,並備妥可供模擬使用的3D內容。

賦予AI代理物理模擬能力

機器人、工廠與自主系統在實際運作前,都必須先透過模擬進行設計、測試與訓練。要讓3D內容可適用於模擬,不只需要逼真的視覺效果,也須具備正確的結構、材質、比例、標籤、感測器與物理屬性。透過NVIDIA Agent Toolkit中的NVIDIA Omniverse函式庫,AI代理將擁有建立工作流程、檢查場景、標記問題及準備資產的工具與技能,協助開發人員更快速地將3D內容轉化為可用於模擬的環境。

NVIDIA執行長黃仁勳表示,物理AI時代將優先在模擬環境中建構。搭載Omniverse函式庫的NVIDIA Agent Toolkit,將AI代理導入開發人員現在使用的3D工具,協助打造模擬就緒的世界,讓機器人、工廠與自主系統早在進入真實世界之前,就能完成訓練與測試。

Omniverse函式庫的核心功能

Omniverse函式庫透過可呼叫的工具,進一步將AI代理延伸至3D與物理AI工作流程。全新Omniverse函式庫包括ovrtx、ovphysx與CAD-to-SimReady技能,現已於GitHub開放存取。這些函式庫的主要功能包括:

  • NVIDIA RTX感測器模擬:ovrtx協助應用程式從3D場景產生攝影機、光達、雷達及其他感測器的輸出結果,讓開發人員與AI代理能測試物理AI系統將如何感知虛擬環境。
  • 物理行為:ovphysx運用GPU加速物理模擬,透過碰撞、質量、摩擦力與運動等屬性,為3D場景帶來逼真的行為,使團隊能先在模擬環境中測試物件與系統的互動模式。
  • 適用於模擬的3D物件:CAD-to-SimReady技能可協助將電腦輔助設計(CAD)資料轉換為基於OpenUSD建置的SimReady資產,賦予3D內容進行物理AI模擬與虛擬測試所需的屬性。

產業應用與開發者生態

SideFX與PTC等軟體開發商正整合Omniverse函式庫,用於支援代理的感測器模擬、物理模擬與資產驗證。SideFX總裁暨執行長Kim Davidson指出,程序化3D內容創作是打造模擬、機器人與工業AI所需之複雜世界的關鍵。透過NVIDIA Omniverse函式庫與OpenUSD,SideFX正探索如何支援Houdini工作流程,協助技術美術師檢查、測試並準備用於模擬的程序化內容。

PTC總裁暨執行長Neil Barua表示,工程團隊希望在整個開發過程中,以更加連貫的方式進行設計、協作與模擬,NVIDIA Omniverse函式庫有助於實現模擬就緒的工作流程,讓驗證與測試更貼近產品設計流程。

玩家總結

NVIDIA透過將Omniverse函式庫整合進Agent Toolkit,大幅降低了開發者將3D模型轉化為「模擬就緒(SimReady)」資產的門檻。這不僅讓AI代理能更精準地在虛擬環境中進行感測器與物理模擬,也為機器人與工業自動化領域的開發流程帶來了顯著的效率提升。隨著SideFX、PTC及各類新創公司的加入,未來在Blender或Houdini等工具中,將能更輕易地建立出符合物理真實感的AI訓練場景。

延伸閱讀:
浮現音樂2026亞洲巡迴啟航 攜同根生前進日本苗場挑戰FUJI ROCK指標舞台「ROOKIE A GO-GO」
運動經濟再升溫!LINE GO攜手味全龍打造沈浸式應援專車
Crunchyroll全面升級在地動漫串流體驗 支援繁體中文服務、夏日強檔與日本同日跟播
《天堂REMASTERED》國際服睽違三年推出全新特化伺服器「XD」事前預約正式開跑