你說,英偉達StyleGAN能生成這樣可愛的老婆,還要什麼自行車?
不不不。包括StyleGAN在內的算法,要麼是保留了高級語義,不能在語義層面控制畫風;
要麼是能學到某個特定領域的畫風,但又很難擴展到多種多樣的畫風。
總結成一句話,就是跟本不能定製自己的老婆。
南加大的兩位男子,深感前輩的算法不夠用,自行開發了不一樣的老婆生成器:
新的算法基於風格遷移,可以把畫風和內容分開定製。
畫風,就是妹子的質感。比如,這張六花晶瑩透亮,頭髮泛着光,臉龐泛着光:
控制這樣的畫風,不限內容,就能生成許多反光能力很強的妹子。髮色、瞳色、表情都不一樣。
內容,就是妹子的特徵。比如,你喜歡藍髮,紫瞳,輕微嘟嘴。
只限內容,不限畫風,就會生成許多你想要的妹子:
俗話說:如果智障有顏色,那麼一定是藍色
老婆定製技能達成,每一天都是人生巔峯。
那麼,研究人員是怎麼登上巔峯的?
如何拆分畫風和內容
預警:前方有晦澀句子 ,但不超過三句話。
團隊說,風格遷移可以表述成一個一般問題 (General Question) 的特定實例 (Particular Instance) 。
那裏的數據集,有兩個互補的變化因子 (Factors of Variation) ,其中一個是標註好的。目標是訓練一個生成網絡,能把兩個因子拆分開來,獨立控制。鄭州×××:http://mobile.63556355.com/
具體到生成老婆的任務上來,兩個因子就是畫風和內容了。
首先,畫風是怎樣定義的呢?
團隊決定把不同的人類畫家的作品,標註成不同的畫風。
比如,上面這兩個妹子都來自Sayori;下面這兩個妹子都來自Swordsouls。
在這兩位藝術家的薰陶之下,AI解鎖了兩種不同的畫風:
除此之外,還要解決“內容”的問題。
研究人員用了獨立於畫風的內容編碼(Style Independent Content Encoding) :訓練一個編碼器,儘可能多的編碼圖像內容相關的信息,而不去包含風格信息。
回顧一下,開頭出現的那些藍妹子,就是從這裏開始孕育的。