NVIDIA 研究團隊近期公布許多驚人的 AI 應用與研究,包括使 AI 學習藝術作品的塗鴉成畫 GauGAN ,還有攜手 BANDAI NAMCO 將觀看小精靈遊戲後產生一套重製版小精靈等, NVIDIA 最近又公布一項對抗生成網路的有趣應用,稱為 GANcraft ,這是一項能夠把 Minecraft /我的世界建構的地圖轉化為媲美 AAA 等級遊戲地圖的 AI 技術,可視為產生平面內容用的 GauGAN 的 3D 版本。 NVIDIA 也將建構 GANcraft 的 Imaginaire 放上 GitHub ,有興趣的開發者可自 GitHub 取得代碼、框架等資源。
Imaginire : GitHub ( Imaginire )
GANcraft 是 NVIDIA 研究團隊與康乃爾大學科學家研究的結果,使 AI 學習如何將 Minecraft 的像素風地圖變成精緻的 3D 場景;由於 Minecraft 建構的場景缺乏真實世界場景的對照,故需要透過間接監督訓練產生內容的 AI 模型。
▲只要會操作 Minecraft , GANcraft 就可將結果轉化為照片仿真等級的精緻 3D 場景
GANcraft 透過輸入 Minecraft 隨機取樣的影像,並藉由 SPADE 想像若轉換成照片仿真等級的影像會是甚麼樣子,透過這樣的方式進行 AI 模型訓練,最終的結果就是能使 GANcraft 將輸入的點陣風影像變成高品質且逼真的 3D 場景,並同樣可套用不同的風格;雖然此次的研究是建構在 Minecraft 上,但相同的技術亦可使用在其它同樣以方塊體建構的 3D 遊戲。
GANcraft 的價值就如同 GauGAN 之於藝術創作者一樣,只要藝術創作者懂得如何操作 Minecraft ,他就可透過 Minecraft 的資源先創作出場景的雛形,再透過 GANcraft 轉化成照片仿真的高品質版本,如此一來能夠縮減 3D 藝術創作、遊戲、 3D 動畫等製作複雜場景的時間。
11 則回應
實際上3a場景設計大多都早已採用Houdini這一類軟體來建立了,單純高清賣塊地形是完全沒有可比性的