GauGAN俗稱神經(jīng)網(wǎng)絡(luò)作圖，是一款圖像制作工具，利用生成的對抗網(wǎng)絡(luò)（GANs）將語意分割圖轉(zhuǎn)換為逼真的圖像，能夠?qū)⑷祟惖睦L畫方式和過程進(jìn)行編譯，在幾秒鐘內(nèi)畫出草圖，并將其轉(zhuǎn)換為逼真的照片，非常有意思！有需要的小伙伴歡迎來西西下載。

新手畫家可能會用畫筆在畫布上畫畫，目的是創(chuàng)作一幅壯美的日落景觀圖——崎嶇的、白雪覆蓋的山峰倒映在清澈的湖泊中——但最終畫出來的只不過是一些看起來更像多色墨水點(diǎn)的東西。

但是，由 Nvidia Research 開發(fā)的深度學(xué)習(xí)模型卻恰恰相反：它可以輕松地將粗糙的涂鴉變成照片級的寫實(shí)杰作。該工具利用生成的對抗網(wǎng)絡(luò)（GANs）將語意分割圖轉(zhuǎn)換為逼真的圖像。

這款使用該模型的交互式應(yīng)用程序，輕輕松松地就達(dá)到了后印象派畫家的水平，它被命名為 GauGAN。

GauGAN 可以為從建筑師、城市規(guī)劃者到景觀設(shè)計(jì)師和游戲開發(fā)商的每個人提供一個強(qiáng)大的工具來創(chuàng)建虛擬世界。有了一個能夠理解現(xiàn)實(shí)世界的人工智能，這些專業(yè)人員可以更好地設(shè)計(jì)出想要的原型，并快速改變它們。

NVIDIA 應(yīng)用深度學(xué)習(xí)研究院副總裁 Bryan Catanzaro 說：「用簡單的草圖進(jìn)行頭腦風(fēng)暴設(shè)計(jì)要容易得多，而且這項(xiàng)技術(shù)能夠?qū)⒉輬D轉(zhuǎn)換成高度逼真的圖像。」

Catanzaro 將 GauGAN 背后的技術(shù)比作「智能畫筆」，它可以在粗略的語意分割圖（即顯示場景中對象位置的高級輪廓）中填充細(xì)節(jié)。

GauGAN 使用戶可以畫出語意分割圖，并合成自己需要的場景，其中，這些分割圖都需要相應(yīng)的標(biāo)簽，如天空、大?；蛘哐?。

經(jīng)過 100 萬張圖片的訓(xùn)練，深度學(xué)習(xí)模型通過結(jié)果來填充景觀：在池塘中畫畫，附近的元素如樹木和巖石將在水中映射。將一個段標(biāo)簽從「草地」換成「雪」，整個圖像將變?yōu)槎緢鼍?，原來枝繁葉茂的樹木則變成了不毛之地。

Catanzaro 說：「這就像一幅彩色的圖畫，描繪了一棵樹在哪里，太陽在哪里，天空在哪里?！谷缓螅窠?jīng)網(wǎng)絡(luò)能夠根據(jù)對真實(shí)圖像的了解，填充所有細(xì)節(jié)和紋理，以及反射、陰影和顏色。

GaoGAN 背后的技術(shù)來自來自英偉達(dá)和 MIT 的研究團(tuán)隊(duì)，成員包括英偉達(dá)的 Ting-Chun Wang、劉明宇（Ming-Yu Liu），Taesung Park (當(dāng)時在英偉達(dá)實(shí)習(xí))，以及來自 MIT 的朱俊彥（Jun-Yan Zhu）。

英偉達(dá)再出黑魔法GauGAN：憑借幾根線條，草圖秒變風(fēng)景照

草圖秒變風(fēng)景照，英偉達(dá)神筆馬良GaoGAN終于開源了

昨天，關(guān)于GaoGAN又有新的進(jìn)展，論文作者之一劉明宇在Tw itter上宣布，GaoGAN軟件開放Beta測試，測試采用網(wǎng)頁版，完全公開，無需注冊和申請。也就是說，之前我們只能看著動圖和說明視頻驚嘆，而現(xiàn)在可以親自動手當(dāng)一次“神筆馬良”了。當(dāng)畫家，從未變得如此簡單！

從GaoGAN的測試界面來看，與之前英偉達(dá)放出的Demo和視頻介紹中幾乎完全一樣。只需要首先點(diǎn)擊屏幕下方的服務(wù)條款前面的勾，就可以盡情作畫啦。

軟件界面上方支持調(diào)節(jié)畫筆的粗細(xì)，左方可以選擇風(fēng)景材質(zhì)類型，比如大山、河流、森林、沙漠海洋等，下方支持更換背景。如果你不會玩，可以看看這個視頻，GaoGAN的開發(fā)者們手把手教你怎么玩！

總之你只管涂只管畫就是，剩下的全交給它就是了。只要會畫簡筆畫，GaoGAN就能讓你找到一種當(dāng)藝術(shù)家的感覺，畢竟GaoGAN這個名字就容易讓人聯(lián)想到那位和梵高相愛相殺的19世紀(jì)著名后印象派繪畫高更。

以后印象派畫家保羅·高更命名的GauGAN從分割圖創(chuàng)建逼真的圖像，分割圖標(biāo)記為描繪場景布局的草圖。

藝術(shù)家可以使用畫筆和油漆桶工具來設(shè)計(jì)他們自己的景觀，如河流，巖石和云。樣式轉(zhuǎn)換算法允許創(chuàng)作者應(yīng)用濾鏡 - 將日間場景更改為日落，或?qū)⒄掌壉普娴膱D像更改為繪畫。用戶甚至可以將自己的過濾器上傳到他們的杰作上，或上傳自定義分割地圖和風(fēng)景圖像作為其藝術(shù)作品的基礎(chǔ)

一步一步，在您自己的肖像或風(fēng)景中看到深刻的學(xué)習(xí)推理。我們的研究人員開發(fā)了最先進(jìn)的圖像重建功能，可以使用訓(xùn)練模型生成的新像素填充圖像中缺失的部分，而不依賴于照片中缺失的像素。用風(fēng)景或肖像拍攝。隨意擦除 - 擺脫那個照片制作者或你的前任，然后看看當(dāng)新的像素被涂在洞中時會發(fā)生什么。