NVIDIA GauGAN AI demo screenshot

 

 

   在今天的Nvidia 2019 GTC大會上,一項驚人的影像創造技術問世了。使用者可利用生成對抗網路技術 (簡稱GAN) 輕鬆繪製出近乎擬真的圖像。只要在軟體上進行簡易操作就能將普通的線條主變成壯麗的山頂日出,相當不可思議。簡直就是新世代的AI「小畫家」! 

 

 

   這套命名為 "GauGAN" 的軟體只展示了Nvidia神經網路平台的冰山一角。它的設計其實是在模擬人類的彩繪方式,目標是在短時間內將草圖轉變成逼真的照片。在稍早的DEMO中,Nvidia應證了之前宣傳的內容。

 

   GauGAN共有三種工具:油漆桶 (填滿功能)、鋼筆和鉛筆。軟體的下方有一系列的圖示供選擇,選擇雲朵圖示並用鉛筆畫一條直線,軟體就會自動生成一縷逼真的雲。這絕對不是圖像印章,而是GauGAN繪製的獨特景象。畫一個圓圈再用油漆桶填入色彩,馬上就產生一個棉花糖般的雲朵。

 

   使用者若選擇樹木形狀的圖示就能立即生成樹木。畫一條直線,樹幹就產生了。直線的頂端再畫上一個圓圈,軟體就能自動填滿樹葉,形成一棵完整的樹。

 

   而且GauGAN採用多模組技術,就算兩名使用者以同樣的設定繪製同樣的草圖,軟體會隨機建立不同的結果。

 

   這為了達到軟體的即時性,GauGAN 必需在Tensor運算平台執行。Nvidia這次是以RDX Titan GPU平台展示即時成果。操作人員在DEMO中畫的線條可以瞬間輸出成逼真的影像。然而負責這項專案的深度學習應用研究副總裁布萊恩.卡坦薩羅 (Bryan Catanzaro) 表示只要進行一些軟體修改,GauGAN幾乎能在任何平台執行,包括一般家用電腦,但可能需要多花幾秒鐘的運算時間。

 

   在DEMO中,物件相連處可看見細微的線條,而開發團隊表示將再強化這部分的瑕疵。Nvidia聲稱目前技術可達到大致上的擬真,除非細看,否則難以察覺。神經網路目前尚未達到原本預期的訓練結果,開發團隊期望能縮小差距。

 

   Nvidia著手利用Flickr上百萬張圖片訓練神經網路,大多數的影上來自於知識分享類別,Catanzaro表示公司只會使用經過授權的圖片。公司指出這套程式可合成數以萬計的物體及其他現實世界有關聯的物體。在GauGAN的運算下,只要改變季節的設定,樹葉就會自動消失在樹上;在樹旁畫一個小池塘,樹的倒影就會馬上出現在水面上。

 

   Catanzaro表示Nvidia今天將發表的白皮書,其實已獲得電腦視覺及圖型辨識期刊的認可。

 

   Catanzaro希望這套軟可以盡快上架到Nvidia 的AI遊樂場平台,但仍然有一些工作必須先完成。他期望這項工具可以協助遊戲開發商創造更身歷其境的遊戲世界,但也說明這不是Nvidia原本設計軟體的方向。

 

   對於軟體用來產生不真實的照片可能被使用在惡意行為,卡坦薩羅同意這是一個比軟體開發、甚至公司還重要的議題,他說道:「我們非常關心這一點,因為我們想讓世界更美好。這已不屬於技術層面的問題,而是人與人之間的信任。是社會上每一個人所需共同面對的。」

 

   雖然只是DEMO版,但這軟體的功能絕對能讓遊戲設計師、建築師或一般玩家都讚嘆不已。公司暫時沒有計畫將軟體作為商業用途,不過很快就會釋出試用版供一般民眾下載。

 

DEMO影片

 

 

原文出處:https://techcrunch.com/2019/03/18/nvidia-ai-turns-sketches-into-photorealistic-landscapes-in-seconds/

 

    阿魯 (Lu's Blog) 發表在 痞客邦 留言(1) 人氣()