生成式 AI 如何幫助創建和編輯逼真的材質?
研究人員展示能夠快速創建和編輯材質的 AI 技術,助力加速 3D 工作流。SIGGRAPH 上,NVIDIA 的研究人員展示了一種可以幫助藝術家快速創建和反覆運算 3D 場景材質的生成式 AI 工作流。
這項研究的演示現身 SIGGRAPH 展會 Real-Time Live 活動,展示了藝術家如何利用文本或圖像提示來更快地生成織物、木材和石材等自訂紋理材質,同時對創作進行更加精細的把控。NVIDIA Picasso 將提供這些功能,使企業、軟體創作者和服務提供者能夠使用其經過完全授權的資料來開發自訂生成式 AI 材質模型。
這套 AI 模型將促進材質創建和編輯的反覆運算,使企業能夠提供新工具來幫助藝術家快速完善 3D 物件的外觀,直到達到想要的效果。
在演示中,NVIDIA 研究人員在 AI 的輔助下,像室內設計師一樣嘗試用 3D 渲染應用製作了一個客廳場景。這次研究人員使用的是 NVIDIA Omniverse USD Composer ——一個使用通用場景描述(即 OpenUSD)進行場景組裝和構圖的參考應用。他們使用這個應用添加帶有磚紋理的牆壁,創建和修改沙發與靠墊的織物選項,並在牆壁的特定區域加入一個抽象的動物設計。
生成式 AI 推動實現設計反覆運算
這次 Real-Time Live 演示結合了幾個經過優化的 AI 模型,開發者將能夠使用 Picasso 來自訂這些工具,並將其集成到專為藝術家打造的創意應用程式中。
在這些功能集成到創意應用中後,藝術家只需要輸入簡短的文本提示就能生成磚塊或馬賽克圖案等材質。這些材材質可以平鋪,所以可以在任何大小的表面上無縫複製。他們還可以導入參考圖像,比如一塊法蘭絨織物,然後將其應用於虛擬場景中的任何物件。
AI 編輯工具可以讓藝術家修改他們正在處理的材質的特定區域,例如咖啡桌紋理的中心。
這些 AI 生成的材質支持符合物理學的渲染,可以逼真地對場景光照的變化作出回應。其所包含的法線、粗糙度和環境遮擋貼圖等功能對於創建和微調逼真 3D 場景的材質至關重要。
在 NVIDIA Tensor Core GPU 的加速下,藝術家可以近乎即時地生成材質並在後臺升級,可實現高達 4K 的解析度,同時創作者可以繼續完善場景的其他部分。
在建築、遊戲開發和室內設計等創意產業中,這些功能可以幫助藝術家快速挖掘創意並嘗試不同的美學風格,創造出多個版本的場景。
例如,遊戲開發者可以使用這些生成式 AI 功能加速開放世界環境設計,或創建角色的服裝等。建築師可以在不同的照明環境中嘗試不同風格的建築立面設計。
使用 NVIDIA Picasso構建生成式 AI 服務
這些符合物理學的材質生成功能都將在 NVIDIA Picasso 中提供。NVIDIA Picasso 是一個雲平臺,企業能夠在其上構建、優化和微調用於視覺內容的生成式 AI 基礎模型。
借助 Picasso,內容提供者能夠基於完全授權的版權資料開發並訓練生成式 AI 工具和服務。Picasso 隸屬於 NVIDIA AI Foundations,NVIDIA AI Foundations 是一套模型製作服務,旨在推動生成式 AI 在文本、視覺內容和生物學領域的應用。
在 SIGGRAPH 主題演講中,NVIDIA 創始人兼首席執行官黃仁勳還宣佈了一項新的 Picasso 功能——根據簡單的文本或圖像提示生成逼真的 360 HDRi 環境貼圖,並以此為 3D 場景增色。
*本文轉載自NVIDIA英偉達企業解決方案。
*與NVIDIA產品相關的圖片或影片(完整或部分)的版權均歸NVIDIA Corporation所有。