GauGAN2利用深度學(xué)習(xí)模型將簡單的書面短語或句子變成逼真的繪畫杰作

一幅價(jià)值連城的畫現(xiàn)在只需要說幾個(gè)字就能創(chuàng)造出來，這都要?dú)w功于NVIDIA Research備受歡迎的AI繪畫Demo最新版本——GauGAN2。

GauGAN背后的深度學(xué)習(xí)模型讓任何人都能將自己的想象力轉(zhuǎn)化為逼真的繪畫作品，而且比之前更加容易。只需輸入一個(gè)短語，比如“海灘上的日落”，AI就會實(shí)時(shí)生成這個(gè)場景。如果再添加一個(gè)形容詞，比如“巖石海灘的日落”，或?qū)ⅰ叭章洹睋Q成“下午”或“雨天”，基于生成式對抗網(wǎng)絡(luò)（GAN）的模型就會立即修改繪畫。

只要按下一個(gè)按鈕，用戶就可以生成分割圖，也就是顯示場景中物體位置的總輪廓圖。用戶可以切換到繪畫模式，用天空、樹木、巖石和河流等標(biāo)簽所對應(yīng)的粗略涂鴉來調(diào)整場景并通過智能畫筆將這些圖畫融入到圖像中。

現(xiàn)在，用戶可以在NVIDIA AI Demos中體驗(yàn)全新的GauGAN2文本-圖像轉(zhuǎn)換功能。網(wǎng)站訪客可以通過NVIDIA Research的最新Demo來體驗(yàn)AI。借助各種文字提示和草圖繪畫的功能，用戶可以通過GauGAN2更加快速地創(chuàng)建和自定義場景并進(jìn)行更精細(xì)的控制。

“惜字如金”的AI

GauGAN2將分割映射、圖像修復(fù)和文本-圖像生成功能集成于一個(gè)模型中，使其成為了一個(gè)可以通過混合文字和圖畫來創(chuàng)造逼真藝術(shù)作品的強(qiáng)大工具。

該Demo首次將文字、語義分割、涂鴉、風(fēng)格等多種形式融入到一個(gè)生成式對抗網(wǎng)絡(luò)（GAN）框架中，它可以更快、更輕松地將藝術(shù)家的設(shè)想變成高質(zhì)量的AI生成圖像。

用戶不需要畫出想象中的每一個(gè)場景元素，而是可以輸入一個(gè)簡短的短語（如白雪皚皚的山脈）來快速生成圖像的關(guān)鍵特征和主題。然后可以使用草圖功能來自定義起點(diǎn)，比如使某座山峰變得更高、在前景中增加幾棵樹或在天空中增加云朵等。

這一Demo不僅僅能創(chuàng)造逼真的圖像，藝術(shù)家們還可以用它來描繪想象中的場景。

想象一下，您將可以再現(xiàn)《星球大戰(zhàn)》系列中的標(biāo)志性星球——塔圖因星有兩個(gè)太陽的景觀。您所需要做的僅僅是使用“沙漠丘陵的太陽”這個(gè)短語來創(chuàng)建一個(gè)起點(diǎn)，然后再快速勾畫出第二個(gè)太陽。

這一流程可以反復(fù)進(jìn)行，用戶在文本框中輸入的每一個(gè)字都會為AI所創(chuàng)造的圖像增加更多的內(nèi)容。

位于GauGAN2后臺的AI模型由NVIDIA Selene超級計(jì)算機(jī)使用1000萬張高質(zhì)量景觀圖像訓(xùn)練而成。該計(jì)算機(jī)是全球最強(qiáng)大的10臺超級計(jì)算機(jī)之一，搭載NVIDIA DGX SuperPOD系統(tǒng)。研究者所使用的神經(jīng)網(wǎng)絡(luò)可以學(xué)習(xí)單詞與對應(yīng)視覺效果之間的聯(lián)系，比如“冬天”、“霧天”或“彩虹”等。與目前專門用于文本-圖像轉(zhuǎn)換或分割圖-圖像轉(zhuǎn)換應(yīng)用的最先進(jìn)模型相比，位于GauGAN2后臺的神經(jīng)網(wǎng)絡(luò)能夠生成種類更多、質(zhì)量更高的圖像。

GauGAN2研究演示展示了未來為藝術(shù)家提供強(qiáng)大圖像生成工具的可能性，比如基于GauGAN技術(shù)并向所有NVIDIA RTX GPU用戶開放下載的NVIDIA Canvas應(yīng)用。

NVIDIA Research在全球擁有200多名科學(xué)家，他們專注于AI、計(jì)算機(jī)視覺、自動(dòng)駕駛汽車、機(jī)器人和圖形學(xué)等領(lǐng)域。

您可以充分參考和利用 NVIDIA 模塊化參考架構(gòu)NVIDIA DGX SuperPOD，它由 NVIDIA DGX A100 系統(tǒng)和NVIDIA生態(tài)系統(tǒng)中值得信賴的IT 解決方案供應(yīng)商提供支持，可助力構(gòu)建您的現(xiàn)代 AI 數(shù)據(jù)中心基礎(chǔ)架構(gòu)，引領(lǐng)您的AI 轉(zhuǎn)型之路。

原文標(biāo)題：請為我畫一幅畫：NVIDIA Research展示GauGAN AI藝術(shù)與文字之間的互動(dòng)

文章出處：【微信公眾號：NVIDIA英偉達(dá)】歡迎添加關(guān)注！文章轉(zhuǎn)載請注明出處。