image credit:geometrylearning
AIが生成するリアルなのに実在しない人の顔画像がネットをにぎわす昨今、ディープラーニング(深層学習)で手書きの顔を現実的な画像にするアプリが脚光を浴びている。このアプリは、フリーハンドでざっくり描いた似顔絵からおそろしくリアルな顔画像がリアルタイムで生成されるもので、完成度が低い絵からもイメージに近い顔が作れるという。
それって顔？ってレベルの線画でも、うまいこと特徴をおさえた顔になるからもうびっくり！絵心がない人にもやさしげな最新アプリの仕事っぷりがすごすぎた。
広告
DeepFaceDrawing: Deep Generation of Face Images from Sketches
絵が苦手でもリアルな顔を作れるアプリDeepFaceDrawing
こちらは香港城市大学と中国科学院の研究者が共同で開発したDeepFaceDrawingのデモ映像だ。彼らはディープラーニング(深層学習)による画像から画像の変換技術に着目し、このアプリを手がけた。このアプリの素晴らしいところは、ラフな線描や描きかけのフリーハンドスケッチからでもハイクオリティな人物画像を作成できる点だ。
つまり絵心がない人でも現実にいそうな顔を気軽に作れるのだ。
描くたびに近い顔が出現。二次元をリアルに変換するアプリ
左の手書きスペースには予めスケッチガイドらしきものがあり、これを目安に輪郭を描くと右にプレビューが生成される。
右上のアジャスタで微調整もできちゃうよ
多少雑でも雰囲気でしあげてくれるのがありがたい
なんなら絵を描かずともいいとこどりの顔が作れるっぽい
特徴をざっくりつかむAIで現実味のある顔が生成
研究者が目指したのは、アーティスト以外のユーザーも使いやすく、形状をより詳細に制御できるアプリだった。そのため似顔絵を描くユーザーの意図を尊重し、できる限り忠実に反映させることに気を配ったという。実はこうした仕組みは、画像生成AIの合成に用いられる拘束条件の一つ「柔らかい拘束」に似ているものだそうだ。
そこで今回の開発にあたっては、フリーハンドのスケッチからもっともらしい顔を高画質で生成するため、ユーザーが描いたスケッチをある程度の幅をもたせた拘束条件に使用したという。
image credit:geometrylearning
アプリでは人間らしい顔の配置を学習済みのAIが、スケッチの目や口などから「おおよその特徴」をおさえることでリアルな顔が生成される。なおリアルな画像を作る過程では別のディープニューラルネットワークも用いられているそうだ。
柔軟性でぎこちなさをクリア？かつてないアプリに
似顔絵まんまではなく特徴をとらえることで、現実にいそうな顔を作り上げるDeepFaceDrawing。まあ確かに、プロの似顔絵ならお手本として完璧だけど、リアリティのない似顔絵と完全一致する顔はだいぶ不自然にちがいない。このアプリはそのぎこちなさを柔軟性でクリアしたようだ。
DeepFaceDrawingの詳細は、アメリカコンピューター学会主催のCG展覧会SIGGRAPH 2020で発表される。似顔絵に自信がある人もない人もこれ一度試してみたくなっちゃうね。
References:boingboing / geometrylearningなど /written by D/ edited by parumo
あわせて読みたい
AIが作ったこの世に存在しないけどすごくリアルな顔画像がフリー素材に。10万枚の顔写真が無料で自由に使用できる。
実在しない人物の顔まで鮮明に作り上げる。AI画像生成技術の急速進歩。フェイク画像を見破るにはどうすればよいのか？
子供が描いた落書きを忠実に3D実写化。すごく楽しいクリーチャーが生まれたよ！
子供の絵を立体的に具現化するシリーズが更なる発展を遂げていた。
子どもの頃に描いたあの絵をデジタル合成で実写化。ツボにはまる仕上がりとなった。「「Kiddie Arts」」
1
4085
1
14
コメント
1. 匿名処理班
真ん中、利き手の反対側で描いてるとしか思えん
2. 匿名処理班
元の絵がそこそこ上手い。左右対称に輪郭を描くのってとっても難しいからね。
3. 匿名処理班
絵の分野はAIに仕事取られることはないと思っていたけれど…
こりゃあアメコミなんかも危ないぞ
4. 匿名処理班
※2
下描き状態のガイドの上から形を描くシステムだから
目鼻の位置が破綻しない整った絵になってるんよ
5. 匿名処理班
指名手配が捗るね
6. 匿名処理班
めちゃくちゃ面白そう！欲しい〜〜！
7. 匿名処理班
全員白人
8. 匿名処理班
デフォルメされてるのはそうでもないけどリアルタッチは危ないな
9. 匿名処理班
いずれ刑事事件の似顔絵とかに使われるのかしらん
10. 匿名処理班
絵心のかけらもないワタシが、
何かの犯罪の目撃者になったときにも安心だね！
11. 匿名処理班
リアルなのに実在しない
って頓智のつもりか？
リアルっぽいのに実在しない
だろ
12. 匿名処理班
なんかミランダカーとかレオナルドディカプリオ出てきてて笑った
13. 匿名処理班
役者も顔じゃなく動きが上手い人の仕事が増えそう。
14. 匿名処理班
此処迄リアルになると他人の空似が発生してまた妙な問題に発展しそう
取り敢えず犯人の似顔絵には使っちゃあかんね
使わないとは思うけどさ
15. 匿名処理班
日本は世界で一番鼻を描くことから逃げてきた
お絵かき大好き民族だからそろそろ鼻がキチンと
描かれた顔もかけるようになるべきだと思うんだ。
日本のマンガアニメってビックリするくらい鼻
描いてないでしょ。戦時中にインクが不足して
鼻の描写を避けてインクを節約するようにと
指令が出たのが原因だという事は誰もが知って
いると思うけど、もうそろそろ鼻を描くために
インク使っても怒られないとおもうんだけどね。
もうインクすら使わないからね。
16. 匿名処理班
日本の裁判所法廷での被告の似顔絵もリアルになる？
横顔とかは、まだ無理っぽい？
17. 匿名処理班
※3
どれだけAIが発達しても、人の手で描かれた絵は重宝されると思う
伝統芸能的な感じで残ると思う
18. 匿名処理班
※3
人間はそのうち絶対にAIの作り出すものに飽きる日が来るから……大丈夫だってw……きっと
19. 匿名処理班
※15
極度の「かわいい」もの好きだからじゃない？
アニメでのプロポーションとか声もリアルなのは好まないよね
このアプリは人種とか年齢は別に設定するのかな
どれも美男美女ばかり
20. 匿名処理班
これを使えば他人の顔を拝借せずともSNSのプロフィール写真で美男/美女になれるな
21. 匿名処理班
※15
’60〜70年代アニメはバタ臭くて彫りの深い
鼻筋のしっかり通った顔立ちが結構多かったし、
’80年代も、北斗の拳やシティーハンターみたいな
劇画寄りの作家を別にしても、丸顔の可愛い系の絵でも
鼻先の下側に影を入れたりちょっと独特の癖のある作画で
それなりに描いていたように思う。
鼻がほぼ点か、ひどいと全く存在しないようなのって、
2000年代以降のいわゆる萌え絵系タッチが広がってから
比率が増えた気がする。
昔のオタク好みの絵と比べてすら、なんか顔がのっぺりしてる。
22. 匿名処理班
※15
戦時中に出た指令が、何の拘束も無いその後数十年のあいだもずっと日本人の感性に
影響を与えるわけがないでしょｗ
鼻を短い線で描くのは、感覚として「そっちのほうが可愛いし綺麗だから」だよ。
立体の美少女フィギュアの鼻をリアルにしたものを想像すれば、異様な感じになるのが
わかると思う。
男キャラは青年くらいになれば鼻をもっと強調されるから、女性的な美への感覚だろうね。
23. 匿名処理班
※5 ※9 ※10
う〜…ん、どうなんだろ？
今までも、モンタージュ技術などは存在していたけど、
目撃者の記憶からあまりにリアルな写真を作ってしまうと
ちょっとした差で本人でも｢別人｣と認識されて通報に繋がらない
とかで、敢えて人間の見た印象ポイントだけ強調した
簡素なタッチで手描きしていると聞いたことがある。
記事に挙がっている例でも、まだ開発途上なせいかも知れないが
絵では「アジア系に見える」「ラテン系っぽい？」という印象を受けるものでも、ことごとく白人顔に変換されているような…。
あと、女性は、眉がどれも似たり寄ったりの
ぐいっと角度ついて曲がったタイプの化粧にされてない？
24. 匿名処理班
2次元絵とか描くとどうなるんだろう？
あと鼻描くことから〜のコメ君さ、北斗の拳とかAKIRAとかリアルなキャラ描く人の絵とか人物画を描くための本とか見たことないだろ。じゃなきゃそんな発言でてこない。最近の絵しか見てないんだろうな。
25. 匿名処理班
>>3
まぁ、絵の仕事自体もともと食っていけるものでは無いけどね…
ただ、人間にしかない想像力やひらめきだけは奪われない。
26. 匿名処理班
ちょっと残念な出来のフレスコ画とか埴輪の顔とかエジプトの壁画の横顔を入力してみたいな
割と故人の特徴をとらえた造形してたとわかったりしてな
27. 匿名処理班
※7
そしてアプリのクリエイターは中国人。
28. 匿名処理班
漫画を実写化する時の配役のイメージソースとして使えそう
29. 匿名処理班
※15
戦時中のインク不足で鼻の描写を避けたというのは、初耳だ。
試しにどんな感じか見てみたいので、よかったら
戦前と戦時中の比較ができる作家の作品名(長期連載なら巻数も)
を、いくつか挙げてくれたら嬉しい。
インクの節約なら、少々凝ろうが簡略化しようが大差ない鼻より
髪の毛や男性の背広・着物なんかの黒ベタ塗りをやめて
線描・点描や薄墨での表現にした方がよっぽど効果的かと思うが。
でも、のらくろ なんかは思いっきり黒々しいし…。
そもそも、インク以前に紙も不足してきていたり、
「この非常時に漫画なんか ふざけてるのか！」
って空気だったり、検閲で 国策プロパガンダ以外の
娯楽作品やまして政治風刺なんかは死に体だったり、
ろくに“漫画自体が描けない”状態だったイメージがある。
30. 匿名処理班
アニメキャラの顔を入れたらどうなるんだろう
31.
32.
33. 匿名処理班
>>3
新しい技術が生まれる度に「絵描きの仕事は無くなる」と言われてきたけど無くなってないからこれからも無くならないと思うよ
34. 匿名処理班
>>15
漫画やアニメ絵に鼻を描くと可愛くないから描いてないだけだぞ
35. 匿名処理班
※34
それを逃げだと言ってるんじゃないの？
ちゃんと画力のあるひとなら鼻をきちんと描いても可愛く描ける
極端にデフォルメされた輪郭と目だけのキャラなんかでも可愛く見える。だからそこへ逃げる
36. 匿名処理班
興味深いね。
もしもこの先、(プロ並みの)アニメ絵にもできるようになると、ラノベの挿し絵やゲームの原画で食ってるイラストレーターは仕事を奪われてしまうかも……
37. 匿名処理班
へのへのもへじがどんな顔になるのか見てみたい
38.
39. 匿名処理班
鼻あるじゃん
アンパンマンしか見たことないのかな
のび太だって鼻がある