英偉達(dá)近期發(fā)布了一款創(chuàng)新工具,為開發(fā)者提供了一條從3D建模到AI圖像生成的新路徑。這款名為Nvidia AI Blueprint for 3D-guided generative AI的工具,專為配備RTX 4080或更高級別GPU的計(jì)算機(jī)設(shè)計(jì)。
該工具將Blender這款流行的3D建模軟件與Black Forest Lab的FLUX.1圖像生成器相結(jié)合,為用戶帶來了前所未有的創(chuàng)作體驗(yàn)。用戶可以在Blender中利用3D對象,如建筑、植物、動物和車輛等,繪制出詳盡的場景,然后以此為藍(lán)本,通過FLUX.1生成2D圖像。
這種方法的優(yōu)勢在于,用戶可以手動調(diào)整視角和對象位置,從而在生成圖像時獲得比單純使用文本描述更多的細(xì)節(jié)控制權(quán)。例如,如果你心中有一個具體的城市景象,包括建筑物的形狀、高度,樹木和汽車的分布,甚至是你的觀察角度,你都可以在Blender中親手塑造出這個場景,然后FLUX.1會以此為基礎(chǔ),生成出你想要的圖像。
英偉達(dá)將這款工具描述為“預(yù)定義、可定制的AI工作流程”,旨在助力開發(fā)者構(gòu)建生成式AI應(yīng)用。為了引導(dǎo)用戶更好地使用這款工具,英偉達(dá)還提供了詳細(xì)的步驟文檔、示例資源和預(yù)配置環(huán)境。
值得注意的是,雖然英偉達(dá)在這一領(lǐng)域取得了突破,但并非首家嘗試此類技術(shù)的公司。早在去年10月的MAX活動上,Adobe就曾透露過一款名為“Project Concept”的類似工具。這款工具同樣允許用戶繪制3D場景,以指導(dǎo)圖像的生成。然而,目前Adobe的版本仍處于實(shí)驗(yàn)階段,發(fā)布日期尚未確定。