3D 藝術(shù)家們不斷進(jìn)行原型設(shè)計(jì)

在傳統(tǒng)工作流中，建模師必須構(gòu)建占位模型、低精度資產(chǎn)來(lái)填充 3D 場(chǎng)景，優(yōu)化核心資產(chǎn)以完成場(chǎng)景。之后，可以優(yōu)化、細(xì)化并最終完成視覺(jué)效果。

原型設(shè)計(jì)非常耗時(shí)，且通常是一次性工作，藝術(shù)家不得不將時(shí)間花費(fèi)在繁瑣的建模而不是創(chuàng)意探索上。

生成式 AI 可加速中間任務(wù)來(lái)輔助藝術(shù)家工作，例如建議和生成草稿對(duì)象來(lái)設(shè)計(jì)場(chǎng)景原型。但要連接多個(gè) AI 模型以釋放這些加速工作流，在技術(shù)上可能具有挑戰(zhàn)。

NVIDIA AI Blueprint 可幫助應(yīng)對(duì)這一挑戰(zhàn)，它可提供示例工作流，以便用戶可以跳過(guò)過(guò)于技術(shù)化的階段，并快速受益于先進(jìn)的生成式 AI 技術(shù)。此外，AI Blueprint 可以根據(jù)每個(gè)用戶的特定需求量身定制。

NVIDIA 今天發(fā)布了用于 3D 模型生成的 AI Blueprint，該工作流讓 3D 藝術(shù)家只需輸入簡(jiǎn)單的文本提示，即可創(chuàng)建多達(dá) 20 個(gè) 3D 模型來(lái)設(shè)計(jì)場(chǎng)景原型。

此外，全新的 Microsoft TRELLIS NVIDIA NIM 微服務(wù)可在用于 3D 模型生成的 AI Blueprint 中運(yùn)行來(lái)生成高質(zhì)量 3D 資產(chǎn)，速度比原生應(yīng)用快 20%。

生成、原型設(shè)計(jì)、重復(fù)

3D 項(xiàng)目始于創(chuàng)意的萌生，隨后要仔細(xì)考慮視覺(jué)細(xì)節(jié)，如主題、位置、裝飾、顏色、紋理等。即使在場(chǎng)景布景后，藝術(shù)家們?nèi)员仨毝啻螜z查和編輯單獨(dú)和整體的視覺(jué)效果。

全新用于 3D 模型生成的 NVIDIA AI Blueprint 為用戶提供了自動(dòng)化原型設(shè)計(jì)的工作流。

由 3D 模型生成 AI Blueprint 生成的示例模型預(yù)覽。

NVIDIA SANA 是一個(gè)文本轉(zhuǎn)圖像框架，可快速合成高分辨率圖像，并生成預(yù)覽以展示可能的物體效果。每個(gè)對(duì)象都可以重新生成、修改或丟棄，讓藝術(shù)家完全掌控創(chuàng)意。

專業(yè)提示：由 Llama 3.1 8B NIM 微服務(wù)提供支持的 LLM 可以為場(chǎng)景中要包含的物體生成創(chuàng)意，并提供提示建議，即使沒(méi)有豐富提示詞經(jīng)驗(yàn)的藝術(shù)家也可以提高創(chuàng)意效率。

然后，藝術(shù)家可以通過(guò)全新的 Microsoft TRELLIS NVIDIA NIM 微服務(wù)將每個(gè)對(duì)象從高質(zhì)量預(yù)覽轉(zhuǎn)換為隨時(shí)可用的 3D 模型，這簡(jiǎn)化了該先進(jìn)模型的部署，并將其加速 20%。

此外，由多達(dá) 20 個(gè) 3D 資產(chǎn)組成的集合可供立即使用或在開(kāi)源 3D 平臺(tái) Blender 中進(jìn)一步優(yōu)化，用于 3D 模型生成的 AI Blueprint 會(huì)自動(dòng)導(dǎo)出到該平臺(tái)。藝術(shù)家們還可以導(dǎo)出到其他流行的 3D 應(yīng)用。

Blender 中的這個(gè) 3D 場(chǎng)景中布置了在 3D 模型生成 AI Blueprint 中生成的對(duì)象。

設(shè)置這一系列工作流通常會(huì)耗費(fèi)大量時(shí)間并且需要技術(shù)知識(shí)，還要試驗(yàn)不同的模型以選擇合適的工作流。NVIDIA AI Blueprint 通過(guò)預(yù)先選擇經(jīng)過(guò)驗(yàn)證的工作流來(lái)簡(jiǎn)化入門流程，并通過(guò)將所需組件打包在一起，簡(jiǎn)化在 NVIDIA GeForce RTX 和 RTX PRO GPU 上的部署。

Microsoft TRELLIS

Microsoft TRELLIS 是由 Microsoft Research 開(kāi)發(fā)的尖端 3D 資產(chǎn)生成模型，能夠根據(jù)文本或圖像提示生成細(xì)節(jié)豐富、包含復(fù)雜形狀和紋理的 3D 資產(chǎn)。

由于它可以生成可即時(shí)預(yù)覽的材質(zhì)和產(chǎn)品級(jí)模型，因此特別適用于游戲設(shè)計(jì)、建筑和數(shù)字媒體制作。

供消費(fèi)者使用的高質(zhì)量文本轉(zhuǎn)圖像 3D 模型往往很難設(shè)置。Microsoft TRELLIS NIM 微服務(wù)可無(wú)縫集成到用于 3D 模型生成的 NVIDIA AI Blueprint 中，為藝術(shù)家節(jié)省大量時(shí)間。

在 Blueprint 中使用時(shí)，得益于 PyTorch 的推理速度優(yōu)化，Microsoft TRELLIS NIM 微服務(wù)的速度可提高 20%。remove 對(duì)于為數(shù)十個(gè)場(chǎng)景生成數(shù)百個(gè)資產(chǎn)的 3D 自由職業(yè)者來(lái)說(shuō)，節(jié)省下來(lái)的時(shí)間是非?？捎^的。

所有配備 16GB 或更大顯存的 NVIDIA GeForce RTX 50 系列和 40 系列 GPU（臺(tái)式機(jī)和筆記本電腦）均支持 Microsoft TRELLIS NIM 微服務(wù)。

準(zhǔn)備、瞄準(zhǔn)目標(biāo)、部署

按照以下說(shuō)明開(kāi)始使用用于 3D 模型生成的 NVIDIA AI Blueprint：

1. 加載 Blueprint，包括模型。

2. 輸入簡(jiǎn)單的場(chǎng)景創(chuàng)意（例如“夜市”或“陽(yáng)光明媚的沙灘”）。

3. 將自動(dòng)生成 20 個(gè)圖像預(yù)覽。

4. 點(diǎn)擊圖像下方的刷新圖標(biāo)可替換任何不需要的對(duì)象。

a. 提示：點(diǎn)擊圖像下方的鉛筆圖標(biāo)可編輯原始提示，從而更好地控制替換圖像。

5. 點(diǎn)擊圖像下方的垃圾桶圖標(biāo)可刪除不需要的對(duì)象。

6. 使用圖像下方的“->3D”圖標(biāo)可轉(zhuǎn)換單個(gè)圖像。

7. 使用底部的“Convert all to 3D”（全部轉(zhuǎn)換為 3D）按鈕可將所有預(yù)覽轉(zhuǎn)換為 3D。

a. 提示：點(diǎn)擊“Start over with a new scene prompt”（使用新場(chǎng)景提示重新開(kāi)始）可開(kāi)始新場(chǎng)景。這將清除當(dāng)前進(jìn)度，因此請(qǐng)務(wù)必先保存。

8. 使用頁(yè)面底部的內(nèi)置按鈕可將文件導(dǎo)出到 Blender，以繼續(xù)優(yōu)化 3D 模型。

立即探索各種精心策劃的 AI Blueprint，包括 3D 引導(dǎo)生成式 AI Blueprint 和 NIM 微服務(wù)。