世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風

傳奇的作者打造傳世的作品,但作者逝世了,又該怎麼辦?

用AI來“傳宗接代”。

最近,便有團隊利用英偉達的StyleGAN,為已經逝世的傳奇漫畫家——手冢治虫的作品“續命”。

提到手冢治虫,你可能會覺得陌生,但提到《鐵臂阿童木》,“大齡”小夥伴們就再熟悉不過了吧?

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風

為了延續他的作品,來自記憶體制造商KIOXIA的研究人員和藝術團隊,與日本株式會社聯手,利用深度學習(StyleGAN),創造了世界上第一部由AI生成的漫畫——《PHAEDO》。

為了利於生成漫畫角色,團隊分析了手冢先生數百部漫畫作品,包括《鐵臂阿童木》、《森林大帝》、《怪醫黑傑克》等等。

《PHAEDO》已經在日本《晨間》週刊上發表。

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風

這部新漫畫,可以說是很好的傳承了手冢先生的衣缽。

讓漫畫之神的作品“傳宗接代”

《PHAEDO》這部漫畫,其實是Kioxia公司一個叫#FutureMemories 01 “TEZUKA 2020”的項目。

項目負責人東原良平(Ryohei Orihara)介紹說:

它是由AI和人類,根據手冢治虫的許多記憶創造出一件作品的項目。漫畫這種藝術表現形式,在世界範圍內廣為人知,並且被幾代人所閱讀和喜愛。

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風


為了讓AI學習手冢治虫作品的特點,研究人員將漫畫人物面部的特徵轉化為數據,分析在不同場景下劇情發展的情況。

而角色生成階段的核心技術,就是英偉達的StyleGAN。

而為了生成一個與StyleGAN一起使用的訓練數據集,來自公立函館未來大學Mukaiyama教授團隊從手冢先生的作品中收集了超過10000張面部圖像數據集,這些圖像可以用來訓練模型。

Mukaiyama表示:

我們還讓計算機學習手冢作品之外的人臉圖像,包括真人的面部圖像,讓它學習通過左右翻轉人臉,產生增強的數據。

訓練和推理使用多個NVIDIA V100 GPU,以及StyleGAN編寫的cuDNN加速的TensorFlow深度學習框架。

在第一階段,StyleGAN在單一過程中生成了人臉,研究人員說:

我們試圖生成更完整的圖像,其中眼睛、鼻子和嘴巴等細微的細節都是從輪廓等粗糙的描繪中逐漸生成的。

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風

接下來,團隊決定只使用手冢治虫漫畫中的女性角色。

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風

最終,團隊利用遷移學習,將數千個數據點整合在一起,實現了類似手冢作品的風格。

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風

通過結合角色的不同個體特徵,研究人員發現可以創造出從未出現過的角色。這種機制通過調整結合時的比例,來讓生成的角色產生變化。

Orihara說,他最初並不相信遷移學習可以做到這一點,畢竟模型內部就像“黑箱”一樣,是未知的。

但這就是深度學習非常有趣的原因。

看到角色一個接一個的被創造出來,這個過程是非常有意思的。

作品出來了,發表又遇到了問題。

最開始,《晨間》週刊的主編Miura是拒絕刊登這部漫畫的,他認為項目過程中有太多的人為干預因素。

但在與團隊多次交涉過後,Miura改變了主意:

我最終意識到,這個項目也可以用來分析人類是如何創作漫畫的,

我想表明,創造一個可以在這些作品中繪製漫畫的AI,本身就是一個人類的創造過程。

關於手冢治虫

手冢治虫(1928年11月3日—1989年2月9日),本名手冢治,因喜愛昆蟲而取了“手冢治虫”的筆名。漫畫家、動畫製作人、醫學博士。

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風

1947年以漫畫《新寶島》奠定了日本漫畫的敘述方式,創立了日本漫畫意識形態,極大的擴張了新漫畫的表現力。1952年作品《鐵臂阿童木》轟動日本,1953年的《緞帶騎士》則是公認的世界第一部少女漫畫。漫畫作品《火之鳥》至今被普遍認為日本漫畫界最高傑作。

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風

同時,他也是日本第一位導入助手製度與企業化經營的漫畫家。1961年成立“蟲Production動畫部”,翌年以“蟲製作公司”的名義開始活動,日本第一部多集TV動畫《鐵臂阿童木》、第一部彩色多集TV動畫《森林大帝》均誕生於此。1973年蟲製作商事倒閉,欠下三億鉅額債務,仍然不停止漫畫創作活動,同年以作品《怪醫黑傑克》俘虜全國讀者,創下多項紀錄。

One More Thing

漫畫之神手冢治虫教我們用科技來描繪夢想的樂趣。同時,他堅持認為,科學不應該拋棄人性。

於是,KIOXIA在項目的官網上,還提出了這樣的一個問題:

如果手冢治虫現在還在世,他眼中(漫畫作品)的未來會是什麼樣子呢?


分享到:


相關文章: