解析AI漫畫系統CariGAN:爲何能與藝術家一決高下

本站智能訊 11月23日消息研究人員投入了大量精力訓練更聰明、更準確、更復雜的人工智能。然而看看沿途發生的花絮也是一件很有趣的事。

我們所知的是,算法可以創造出逼真的人像或足以以假亂真的視頻,但來自微軟和香港城市大學的人工智能開發者團隊卻迴避了繪製準確性。相反,他們把人工智能用於自動照片變成一幅漫畫,能夠模仿那些你可能在遊樂場地方看到的那種誇張的、高度程式化圖像

斯坦福大學研究生Kaidi Cao與來自香港城市大學的人工智能研究人員Jing Liao以及微軟的Lu Yuan合作開發了以神經網絡繪製漫畫的系統,這些畫作品令人感到難以置信。考慮到Kaidi Cao參與此項目時,他只是北京微軟研究院視覺計算小組的一名實習生

兩個AI協作創造漫畫系統

爲了創造出能映射到一個人面部特徵風格圖像,工程師們需要訓練兩個獨立的人工智能系統,最終教他們協同工作。否則,結果將會像之前試圖製造人工智能漫畫一樣,看起來更像是道林·格雷畫作的恐怖版本

這裡的AI,實際上是一對生成對抗網絡(GAN),被稱爲CariGAN。它的第一個神經網絡,CariGeoGAN,決定了照片中人臉的幾何形狀,並將其映射到一個漫畫模型。CariGANs的另一半CariStyGAN進行“風格轉移”,或將藝術外觀應用於幾何圖。

爲了讓CariGAN能夠將一張相對無聊的照片變成一場賞心悅目的盛宴,系統接受了數以千計的手繪圖像訓練。

爲了確定功效,研究人員進行了兩項研究。第一個是確保人工智能的漫畫保留了肖像主題身份。這裡的斷言是,一個好的漫畫必須以誇張的形式捕捉一個人的本質。據研究人員稱,受訪者表示CariGANs的漫畫與手繪藝術家相比毫不遜色。

研究人員進行了第二項研究,以確定“繪圖”與手繪藝術家作品相比的總體效果。這同樣表明很成功。

在CariGAN AI中,一個GAN負責分析一個人的面部照片,並誇大某些特徵,例如高顴骨、突出的下巴,就像一個漫畫藝術家所做的那樣,另一個則負責模仿漫畫藝術家中常見的筆觸藝術風格。把它們放在一起,你會看到一些看起來很傻的AI藝術作品,看起來就像其所描畫的那個人。或者,至少它看起來就像一個人畫的漫畫一樣。

解析視頻和逆向尋找卡通人物原型

CariGANs AI還可以解析視頻中的幀並從中創建漫畫,以下圖像就是來自美國總統一個的演講視頻。

這對動畫師來說是非常有用的,證明了與人工智能一起創造的“藝術”可以在人類精神中激起一些東西

CariGANs AI還可以對漫畫進行逆向工程,並確定卡通人物的真實外觀。研究人員說:“我們相信這可能對漫畫中的人臉識別有幫助。”這聽起來有點可怕。但如果這意味着我可以用一個巨大的腦袋和一個寬邊帽作爲ID來繪製自己,那就把我算進去吧。

值得注意的是,CariGAN AI的排名比手繪的要好22.95%,這意味着其結果有時會讓用戶誤以爲這是真正的手繪漫畫。儘管它離理想的欺騙率(也就是50%)還差得很遠,但該研究小組所做的工作已經邁出了一大步,與其他方法相比,繪製效果更接近藝術家們所繪製的漫畫。

該藝術算法將於今年12月在東京舉行的國際動漫遊戲技術大會(SIGGRAPH Asia 2018)上發佈。

(選自:futurism& the next web   作者:Dan Robitzski & Tristan Greene  編譯:本站智能  參與:nariiy)