現(xiàn)已面向數(shù)百萬 GeForce RTX 用戶,提供全新 Blender AI 插件、Ada Lovelace 支持以及數(shù)千種免費 3D USD 資產(chǎn)。
無論是創(chuàng)造能夠表達原始情感的逼真數(shù)字人,還是構(gòu)建身臨其境的虛擬世界,全球設(shè)計、工程、創(chuàng)意和其他行業(yè)的人士都在通過 3D 工作流,力求再創(chuàng)新高。
動畫師、創(chuàng)作者和開發(fā)者可使用全新 AI 工具,對 3D 環(huán)境、仿真模擬、以及元宇宙(互聯(lián)網(wǎng)的 3D 演進)展開全新的構(gòu)想。
NVIDIA Omniverse 平臺基于通用場景描述(USD)框架,支持元宇宙應(yīng)用程序的開發(fā)。該平臺正在通過 Blender 增強功能和一套面向 3D 藝術(shù)家的全新實驗性生成式 AI 工具進行擴展。
NVIDIA 在 CES 特別演講中發(fā)布了這些功能,同時發(fā)布的還有 NVIDIA Studio 筆記本電腦上的 Omniverse 預(yù)裝,以及數(shù)千種免費的全新 USD 資產(chǎn)。這些發(fā)布都致力于推動 3D 工作流的加速采用。
NVIDIA Studio 3D 創(chuàng)作者 Jeremy Lightcap、Edward McEvenue、Jae Solina、Pekka Varis、Shangyu Wang、Ashley Goldstein 借助 Omniverse ,采用多款 3D 設(shè)計工具,在多個 RTX 系統(tǒng)上展開的跨時區(qū)協(xié)作。
此外,Blender 的新版本現(xiàn)已在 Omniverse Launcher 中提供,可為全球各地的 Blender 用戶帶來 3D 生成式 AI 功能。一個全新的面板使 Blender 用戶能夠輕松地傳輸形態(tài)鍵和綁定的角色,F(xiàn)可通過 Omniverse Audio2Face(可基于音頻文件自動生成逼真面部表情的 AI 工具)的一鍵式操作,解決重新連接綁定角色頭像的難題。
另一用于場景優(yōu)化的新面板可助力用戶更輕松地在多應(yīng)用程序 3D 工作流中實時創(chuàng)建 USD 場景。
此外,Audio2Face、Audio2Gesture 和 Audio2Emotion 等打造即時 3D 角色動畫的生成式 AI 工具也實現(xiàn)了性能的升級,使開發(fā)者和創(chuàng)作者能夠更輕松地將其集成到當前的 3D 管線中。
創(chuàng)作者可使用 Audio2Face,基于音頻文件生成面部表情;使用 Audio2Emotion,生成從快樂和興奮到悲傷和遺憾的逼真情緒;使用 Audio2Gesture,實現(xiàn)逼真的上半身動作。這些基于音頻打造動畫的工具對于 3D 藝術(shù)家來說頗具顛覆性,使其能夠告別繁瑣的手動任務(wù)。
如今,更多的創(chuàng)意和技術(shù)領(lǐng)域的專業(yè)人士開始采用 AI 輔助創(chuàng)作者工具。此前,NVIDIA Canvas 的推出使藝術(shù)家能夠無縫地生成景觀,并通過簡單的筆觸和 AI 來對其進行迭代。很快,所有 RTX 用戶就能下載 Canvas 的更新,采用 360 度環(huán)繞圖像來創(chuàng)建全景環(huán)境和華麗的圖像以及進行概念化。AI ToyBox 具有源自 NVIDIA Research 的擴展功能,使創(chuàng)作者能夠基于 2D 輸入生成 3D 網(wǎng)格。
Omniverse 強大的 AI 工具能夠?qū)⑷蝿?wù)化繁為簡,不同能力水平的創(chuàng)作者都可以利用這些資源來創(chuàng)作高質(zhì)量的作品,以應(yīng)對元宇宙中對內(nèi)容和虛擬世界不斷增長的需求。
“對 3D 技能的需求正在飆升,但學習 3D 對某些人來說可能非常艱難,而且相當耗時,” Jae Solina(JSFilmz)說道,“但這些平臺的最新發(fā)展不僅讓創(chuàng)作者和專業(yè)技術(shù)人士能夠繼續(xù)使用自己慣用的 3D 工具,還能提升藝術(shù)創(chuàng)造力,甚至利用 AI 在工作流中為其提供協(xié)助!
Omniverse Launcher 是下載 Omniverse 內(nèi)容和參考應(yīng)用程序的門戶,也已向系統(tǒng)構(gòu)建者開放,以便于其進行預(yù)裝,從而使 3D 創(chuàng)作者能夠在 NVIDIA Studio 驗證的筆記本電腦上獲得優(yōu)化的開箱即用體驗。技嘉科技和 AORUS 將于 2023 年率先推出首批預(yù)裝 Omniverse Launcher 的筆記本電腦,讓更多 3D 內(nèi)容創(chuàng)作者能夠訪問這一平臺。
NVIDIA RTX Remix 是一個基于 Omniverse 的免費改裝平臺,可助力改裝者快速創(chuàng)建并分享經(jīng)典游戲的#RTXON 模組,且每個模組都具有完整的光線追蹤、增強的材質(zhì)、NVIDIA DLSS 3 和 NVIDIA Reflex。其搶先體驗版本即將推出。令人驚嘆的“傳送門(Portal)”RTX 版是使用 RTX Remix 構(gòu)建的,為展示改裝者在其模組中啟用 RTX 是多么輕松,我們與 “傳送門:序曲(Portal: Prelude)”(2008 年發(fā)布的非官方“傳送門”前傳)的原始創(chuàng)建者分享了 RTX Remix。
Omniverse 用戶還可以訪問數(shù)以千計的全新免費 USD 資產(chǎn),包括基于 USD 的 NVIDIA RTX “我的世界(Minecraft)”冬季世界體驗,并學習如何創(chuàng)建自己的 NVIDIA SimReady 資產(chǎn)以進行復(fù)雜的模擬構(gòu)建。使用 Omniverse,創(chuàng)作者可使用常用工具(例如 Autodesk Maya、Autodesk 3ds Max、Blender、Adobe Substance 3D Painter 等),通過 AI、模擬工具和實時 RTX 加速渲染來增強現(xiàn)有工作流。
各類 3D 創(chuàng)作者均可利用這些新工具,在 3D 模擬和虛擬世界構(gòu)建方面實現(xiàn)突破創(chuàng)新。借助音頻轉(zhuǎn)動畫工具、生成式 AI 和元宇宙,用戶就能對數(shù)字世界展開新的構(gòu)想,并充分發(fā)揮創(chuàng)造力,創(chuàng)作出栩栩如生的角色。
Omniverse 平臺的最新更新
Omniverse 的最新更新包括:
Unity Omniverse Connector 可供搶先體驗。
Blender alpha 版本現(xiàn)可在 Omniverse Launcher 中使用,使用戶能夠修復(fù)幾何體,生成自動 UV,并將高分辨率 CAD 數(shù)據(jù)抽取為更多可用的多邊形。
Audio2Face、Audio2Emotion 和 Audio2Gesture 的更新能夠更好地實現(xiàn)即時且逼真的角色動畫,現(xiàn)可在 Omniverse Audio2Face 和 Omniverse Machinima 中使用。
NVIDIA Canvas 的功能更新版本很快即將在 Omniverse Launcher 上線,可通過簡單的筆觸來創(chuàng)建 360 度全景。用戶可將環(huán)境導(dǎo)入 3D 應(yīng)用程序,以對不同的設(shè)置和光照進行測試。
AI ToyBox 實驗工具由 NVIDIA Research 構(gòu)建,其中包括 GET3D,這是一種 Omniverse 擴展,可基于 2D 圖像生成可訓練的 3D 模型,使開發(fā)者能夠使用自己的數(shù)據(jù)集,快速創(chuàng)建 3D 虛擬世界模型,現(xiàn)已在 Omniverse Extension Manager 中提供。
數(shù)以千計的全新免費 3D 資產(chǎn)現(xiàn)已在全球范圍內(nèi)提供,供用戶在 Omniverse 中進行構(gòu)建和創(chuàng)作。
創(chuàng)作者可免費下載 NVIDIA Omniverse,將作品提交到 NVIDIA Omniverse 圖庫,并通過論壇等查找資源。