GauGAN2利用深度學習模型將簡單的書面短語或句子變成逼真的繪畫杰作

一幅價值連城的畫現在只需要說幾個字就能創造出來，這都要歸功于NVIDIA Research備受歡迎的AI繪畫Demo最新版本——GauGAN2。

GauGAN背后的深度學習模型讓任何人都能將自己的想象力轉化為逼真的繪畫作品，而且比之前更加容易。只需輸入一個短語，比如“海灘上的日落”，AI就會實時生成這個場景。如果再添加一個形容詞，比如“巖石海灘的日落”，或將“日落”換成“下午”或“雨天”，基于生成式對抗網絡（GAN）的模型就會立即修改繪畫。

只要按下一個按鈕，用戶就可以生成分割圖，也就是顯示場景中物體位置的總輪廓圖。用戶可以切換到繪畫模式，用天空、樹木、巖石和河流等標簽所對應的粗略涂鴉來調整場景并通過智能畫筆將這些圖畫融入到圖像中。

現在，用戶可以在NVIDIA AI Demos中體驗全新的GauGAN2文本-圖像轉換功能。網站訪客可以通過NVIDIA Research的最新Demo來體驗AI。借助各種文字提示和草圖繪畫的功能，用戶可以通過GauGAN2更加快速地創建和自定義場景并進行更精細的控制。

“惜字如金”的AI

GauGAN2將分割映射、圖像修復和文本-圖像生成功能集成于一個模型中，使其成為了一個可以通過混合文字和圖畫來創造逼真藝術作品的強大工具。

該Demo首次將文字、語義分割、涂鴉、風格等多種形式融入到一個生成式對抗網絡（GAN）框架中，它可以更快、更輕松地將藝術家的設想變成高質量的AI生成圖像。

用戶不需要畫出想象中的每一個場景元素，而是可以輸入一個簡短的短語（如白雪皚皚的山脈）來快速生成圖像的關鍵特征和主題。然后可以使用草圖功能來自定義起點，比如使某座山峰變得更高、在前景中增加幾棵樹或在天空中增加云朵等。

這一Demo不僅僅能創造逼真的圖像，藝術家們還可以用它來描繪想象中的場景。

想象一下，您將可以再現《星球大戰》系列中的標志性星球——塔圖因星有兩個太陽的景觀。您所需要做的僅僅是使用“沙漠丘陵的太陽”這個短語來創建一個起點，然后再快速勾畫出第二個太陽。

這一流程可以反復進行，用戶在文本框中輸入的每一個字都會為AI所創造的圖像增加更多的內容。

位于GauGAN2后臺的AI模型由NVIDIA Selene超級計算機使用1000萬張高質量景觀圖像訓練而成。該計算機是全球最強大的10臺超級計算機之一，搭載NVIDIA DGX SuperPOD系統。研究者所使用的神經網絡可以學習單詞與對應視覺效果之間的聯系，比如“冬天”、“霧天”或“彩虹”等。與目前專門用于文本-圖像轉換或分割圖-圖像轉換應用的最先進模型相比，位于GauGAN2后臺的神經網絡能夠生成種類更多、質量更高的圖像。

GauGAN2研究演示展示了未來為藝術家提供強大圖像生成工具的可能性，比如基于GauGAN技術并向所有NVIDIA RTX GPU用戶開放下載的NVIDIA Canvas應用。

NVIDIA Research在全球擁有200多名科學家，他們專注于AI、計算機視覺、自動駕駛汽車、機器人和圖形學等領域。

您可以充分參考和利用 NVIDIA 模塊化參考架構NVIDIA DGX SuperPOD，它由 NVIDIA DGX A100 系統和NVIDIA生態系統中值得信賴的IT 解決方案供應商提供支持，可助力構建您的現代 AI 數據中心基礎架構，引領您的AI 轉型之路。

原文標題：請為我畫一幅畫：NVIDIA Research展示GauGAN AI藝術與文字之間的互動

文章出處：【微信公眾號：NVIDIA英偉達】歡迎添加關注！文章轉載請注明出處。