為了加速 3D 世界和元宇宙的發展，NVIDIA 推出了許多 AI 研究項目來幫助各行業的創作者利用生成式 AI 挖掘新的可能性。

生成式 AI 將觸及元宇宙的方方面面，而且它已經被用于一些用例，例如使用 Omniverse ACE 構建栩栩如生的 AI 虛擬形象等。其中的許多項目已成為 Omniverse 社區廣受歡迎的工具，包括能夠根據音頻生成動畫的 Audio2Face 和 Audio2Gesture。

在 CES 上，NVIDIA 公布了 Omniverse 即將加入的全新生成式 AI 技術，這項技術將使虛擬世界的創建變得比以往更快、更容易。這些模型既可以作為 NVIDIA 合作伙伴的第三方連接器，也可以在 NVIDIA 研究團隊發布的內部 AI 項目中作為 AI ToyBox 的擴展程序。NVIDIA Omniverse 中的所有生成式 AI 研究項目和連接器都使用合法授權和購買的數據集。

使用生成式 AI 連接器和擴展程序

加速 3D 內容創建

NVIDIA Omniverse 通過用于第三方技術的連接器和擴展程序帶來最新、最棒的生成式 AI 技術。

Move.ai 能夠根據身體動作生成動畫。通過 Move.ai，用戶可以在任何地方捕捉人體動作并直接輸出到 Omniverse 中。

視頻 1：NVIDIA Omniverse 中的個人拳擊示例，角色由 Move.ai 的運動數據驅動。

Lumirithmic 可根據面部掃描生成頭部 3D 網格。該連接器使用戶能夠輕松地根據面部掃描創建電影級的虛擬形象并在任何行業都能實現大規模的 3D 掃描。Lumirithmic 聯合創始人兼首席執行官 Gaurav Chawla 表示：“我們十分高興與 NVIDIA 一起通過 Omniverse 將我們的 3D 面部掃描產品帶給創作者、游戲玩家和開發者，使游戲、廣告技術、元宇宙等應用獲得高質量的 3D 面部形象。

視頻 2：Omniverse - Lumirithmic 3D 虛擬形象捕捉集成。

Elevate3D 可根據 360 度視頻錄像生成逼真的產品 3D 圖像，利用神經輻射場創建具有超高視覺保真度的 3D 網格。Elevate3D 聯合創始人 Alexandre Carlier 和 Martin Danelljan 表示：“Omniverse 使我們能夠為各種工作流和行業提供我們的技術。另外，我們愿意在該平臺上構建擴展程序的另一個原因是上面有優秀的文檔和開發者體驗。我們的這一擴展程序將解決掃描實物時的各種難題。”

探索和實驗最新生成式 AI 研究

AI 工作流是 Omniverse 體驗的核心。因此 NVIDIA 不斷開展新的研究項目來幫助 3D 藝術家和創作者使用 AI 加速他們的工作流。這些 AI 項目中有許多變成了廣泛使用的功能，例如 Machinima 中的姿勢估計、根據簡單的 2D 筆畫生成 360 度圖像的 NVIDIA Canvas 等。

在 CES 上發布的 GET3D 是一個新的生成式 AI 模型，它可以根據 2D 圖像、文本和數字等數據生成具有拓撲結構、豐富幾何細節和紋理的 3D 形狀。這些 3D 形狀或紋理網格可以是動物和人類的造型，并且即將加入汽車、椅子、摩托車和建筑物，使部分行業的創作者能夠迅速擴大他們虛擬世界中的內容數量和多樣性。

圖 1：GET3D 讓用戶能夠快速生成用于填充場景的 3D 動物等形狀和網格。

GET3D 將在 Omniverse AI ToyBox 中與 NVIDIA 發布的現有生成式 AI 研究項目（如 GANVerse3D Image2Car 和 AI Animal Explorer）一起提供。AI ToyBox 收錄了所有最新 NVIDIA AI 項目，使內容創作者能夠在虛擬世界中探索新的可能性。

AI 與元宇宙：共生關系

AI 與元宇宙對彼此的擴展都至關重要。從汽車到醫療儀器再到倉庫機器人，全球的各個行業都在成為軟件定義行業。這些軟件定義技術如果沒有在真實環境中進行徹底的測試，就無法完成開發或部署。

元宇宙中的數字孿生正在提供符合物理學的虛擬環境，使開發者能夠以前所未有的速度進行智能機器人等軟件定義技術的仿真模擬和測試。在元宇宙中創建的合成數據正在進一步加速前沿 AI 應用的訓練，使用比以前更多的數據來訓練 AI。

生成式 AI 是擴展這些數字孿生與虛擬環境的關鍵，它們將開創 AI 和元宇宙的新時代。

Omniverse 相關資源

• Omniverse 的模塊化開發框架

  開發者可以使用 Omniverse 的模塊化開發框架構建用于 3D 世界的生成式 AI 工具。

  詳情請見：

  https://developer.nvidia.cn/zh-cn/nvidia-omniverse-platform

• Omniverse Enterprise

  企業可以通過 NVIDIA Omniverse Enterprise 使用最新的生成式 AI 技術擴展數字孿生模擬。

  詳情請見：

  https://www.nvidia.cn/omniverse/enterprise/

• Omniverse 開發者資源中心

  請訪問 Omniverse 開發者資源中心獲取更多資源，閱讀 Omniverse 的最新教程并在論壇上獲得支持。

  詳情請見：

  https://developer.nvidia.com/nvidia-omniverse-developer-resource-center