NVIDIA 研究部門為了探索 AI 的可能性,在 2019 年 GTC 發表 GauGAN 技術,只要以畫筆塗鴉即可由 AI 產生精緻的畫作,而 NVIDIA 宣布推出進化版本的 GauGAN ,這次不僅只是塗鴉成畫,只要打入文字描述,即可產生符合敘述的圖像作品。
目前 NVIDIA 還未開放 GauGAN 2 供一般使用者體驗,不過只要是具有 NVIDIA GPU 的使用者皆可下載基於 GauGAN 技術的單機版應用程式 NVIDIA Canvas Beta 版。下載: NVDIA Canvas
▲ GauGAN 2 具備分析語意並轉換為符合的圖像的功能
舉例來說,當輸入"海灘上的落日"與"海浪拍擊海灘上的岩石"等描述, GauGAN2 就會產生符合敘述的影像,同時在敘述中加入形容詞,也會依照這些形容產生變化。 GauGAN 2 技術也結合語意分析,影像辨識、場景辨識等功能,是利用 NVIDIA 自建超算系統 Selene 以超過 1,000 萬張高畫質的風景影像搭配對抗生成神經網路進行訓練,這項 AI 訓練還加入對季節、自然現象等文字與視覺的描述,使其能夠針對文字進行圖像轉換。