この画像を大きなサイズで見るAIが生成するリアルなのに実在しない人の顔画像がネットをにぎわす昨今、ディープラーニング(深層学習)で手書きの顔を現実的な画像にするアプリが脚光を浴びている。
このアプリは、フリーハンドでざっくり描いた似顔絵からおそろしくリアルな顔画像がリアルタイムで生成されるもので、完成度が低い絵からもイメージに近い顔が作れるという。
それって顔？ってレベルの線画でも、うまいこと特徴をおさえた顔になるからもうびっくり！絵心がない人にもやさしげな最新アプリの仕事っぷりがすごすぎた。
絵が苦手でもリアルな顔を作れるアプリDeepFaceDrawing
こちらは香港城市大学と中国科学院の研究者が共同で開発したDeepFaceDrawingのデモ映像だ。彼らはディープラーニング(深層学習)による画像から画像の変換技術に着目し、このアプリを手がけた。
このアプリの素晴らしいところは、ラフな線描や描きかけのフリーハンドスケッチからでもハイクオリティな人物画像を作成できる点だ。
つまり絵心がない人でも現実にいそうな顔を気軽に作れるのだ。
描くたびに近い顔が出現。二次元をリアルに変換するアプリ
左の手書きスペースには予めスケッチガイドらしきものがあり、これを目安に輪郭を描くと右にプレビューが生成される。
この画像を大きなサイズで見るちょっと輪郭を描けばその輪郭をもつ顔画像が現れ…
この画像を大きなサイズで見る描き加えるたびに似通った顔が生成！
右上のアジャスタで微調整もできちゃうよ
この画像を大きなサイズで見る髪型も線に合わせた形になる
多少雑でも雰囲気でしあげてくれるのがありがたい
この画像を大きなサイズで見るかなり融通が利くこのアプリ。以下のように未完成な似顔絵だろうと目鼻っぽいものさえあればOK。
この画像を大きなサイズで見る上の似顔絵のリアル版。足らない部分は適当に補い、とりあえず寄せてくシステムだ。
この画像を大きなサイズで見るさらに2つの顔を合成するモーフィングや
この画像を大きなサイズで見る複数の顔のパーツや輪郭を合成するコピーペースト機能もあり、
なんなら絵を描かずともいいとこどりの顔が作れるっぽい
この画像を大きなサイズで見るただ今回の動画はリアルタイムの処理を早回したもので、実際の処理にはもう少し時間がかかるらしい。でもこれだけの仕事をこなせるアプリってシンプルにすごいと思うわ。
特徴をざっくりつかむAIで現実味のある顔が生成
研究者が目指したのは、アーティスト以外のユーザーも使いやすく、形状をより詳細に制御できるアプリだった。そのため似顔絵を描くユーザーの意図を尊重し、できる限り忠実に反映させることに気を配ったという。
実はこうした仕組みは、画像生成AIの合成に用いられる拘束条件の一つ「柔らかい拘束」に似ているものだそうだ。
そこで今回の開発にあたっては、フリーハンドのスケッチからもっともらしい顔を高画質で生成するため、ユーザーが描いたスケッチをある程度の幅をもたせた拘束条件に使用したという。
この画像を大きなサイズで見るアプリでは人間らしい顔の配置を学習済みのAIが、スケッチの目や口などから「おおよその特徴」をおさえることでリアルな顔が生成される。なおリアルな画像を作る過程では別のディープニューラルネットワークも用いられているそうだ。
柔軟性でぎこちなさをクリア？かつてないアプリに
似顔絵まんまではなく特徴をとらえることで、現実にいそうな顔を作り上げるDeepFaceDrawing。
まあ確かに、プロの似顔絵ならお手本として完璧だけど、リアリティのない似顔絵と完全一致する顔はだいぶ不自然にちがいない。このアプリはそのぎこちなさを柔軟性でクリアしたようだ。
DeepFaceDrawingの詳細は、アメリカコンピューター学会主催のCG展覧会SIGGRAPH 2020で発表される。似顔絵に自信がある人もない人もこれ一度試してみたくなっちゃうね。
References:boingboing / geometrylearningなど /written by D/ edited by parumo
真ん中、利き手の反対側で描いてるとしか思えん
元の絵がそこそこ上手い。左右対称に輪郭を描くのってとっても難しいからね。
※2
下描き状態のガイドの上から形を描くシステムだから
目鼻の位置が破綻しない整った絵になってるんよ
絵の分野はAIに仕事取られることはないと思っていたけれど…
こりゃあアメコミなんかも危ないぞ
※3
どれだけAIが発達しても、人の手で描かれた絵は重宝されると思う
伝統芸能的な感じで残ると思う
※3
人間はそのうち絶対にAIの作り出すものに飽きる日が来るから……大丈夫だってw……きっと
>>3
まぁ、絵の仕事自体もともと食っていけるものでは無いけどね…
ただ、人間にしかない想像力やひらめきだけは奪われない。
>>3
新しい技術が生まれる度に「絵描きの仕事は無くなる」と言われてきたけど無くなってないからこれからも無くならないと思うよ
指名手配が捗るね
※5 ※9 ※10
う～…ん、どうなんだろ？
今までも、モンタージュ技術などは存在していたけど、
目撃者の記憶からあまりにリアルな写真を作ってしまうと
ちょっとした差で本人でも｢別人｣と認識されて通報に繋がらない
とかで、敢えて人間の見た印象ポイントだけ強調した
簡素なタッチで手描きしていると聞いたことがある。
記事に挙がっている例でも、まだ開発途上なせいかも知れないが
絵では「アジア系に見える」「ラテン系っぽい？」という印象を受けるものでも、ことごとく白人顔に変換されているような…。
あと、女性は、眉がどれも似たり寄ったりの
ぐいっと角度ついて曲がったタイプの化粧にされてない？
めちゃくちゃ面白そう！欲しい～～！
全員白人
※7
そしてアプリのクリエイターは中国人。
デフォルメされてるのはそうでもないけどリアルタッチは危ないな
いずれ刑事事件の似顔絵とかに使われるのかしらん
絵心のかけらもないワタシが、
何かの犯罪の目撃者になったときにも安心だね！
リアルなのに実在しない
って頓智のつもりか？
リアルっぽいのに実在しない
だろ
なんかミランダカーとかレオナルドディカプリオ出てきてて笑った
役者も顔じゃなく動きが上手い人の仕事が増えそう。
此処迄リアルになると他人の空似が発生してまた妙な問題に発展しそう
取り敢えず犯人の似顔絵には使っちゃあかんね
使わないとは思うけどさ
日本は世界で一番鼻を描くことから逃げてきた
お絵かき大好き民族だからそろそろ鼻がキチンと
描かれた顔もかけるようになるべきだと思うんだ。
日本のマンガアニメってビックリするくらい鼻
描いてないでしょ。戦時中にインクが不足して
鼻の描写を避けてインクを節約するようにと
指令が出たのが原因だという事は誰もが知って
いると思うけど、もうそろそろ鼻を描くために
インク使っても怒られないとおもうんだけどね。
もうインクすら使わないからね。
※15
極度の「かわいい」もの好きだからじゃない？
アニメでのプロポーションとか声もリアルなのは好まないよね
このアプリは人種とか年齢は別に設定するのかな
どれも美男美女ばかり
※15
’60～70年代アニメはバタ臭くて彫りの深い
鼻筋のしっかり通った顔立ちが結構多かったし、
’80年代も、北斗の拳やシティーハンターみたいな
劇画寄りの作家を別にしても、丸顔の可愛い系の絵でも
鼻先の下側に影を入れたりちょっと独特の癖のある作画で
それなりに描いていたように思う。
鼻がほぼ点か、ひどいと全く存在しないようなのって、
2000年代以降のいわゆる萌え絵系タッチが広がってから
比率が増えた気がする。
昔のオタク好みの絵と比べてすら、なんか顔がのっぺりしてる。
※15
戦時中に出た指令が、何の拘束も無いその後数十年のあいだもずっと日本人の感性に
影響を与えるわけがないでしょｗ
鼻を短い線で描くのは、感覚として「そっちのほうが可愛いし綺麗だから」だよ。
立体の美少女フィギュアの鼻をリアルにしたものを想像すれば、異様な感じになるのが
わかると思う。
男キャラは青年くらいになれば鼻をもっと強調されるから、女性的な美への感覚だろうね。
※15
戦時中のインク不足で鼻の描写を避けたというのは、初耳だ。
試しにどんな感じか見てみたいので、よかったら
戦前と戦時中の比較ができる作家の作品名(長期連載なら巻数も)
を、いくつか挙げてくれたら嬉しい。
インクの節約なら、少々凝ろうが簡略化しようが大差ない鼻より
髪の毛や男性の背広・着物なんかの黒ベタ塗りをやめて
線描・点描や薄墨での表現にした方がよっぽど効果的かと思うが。
でも、のらくろ なんかは思いっきり黒々しいし…。
そもそも、インク以前に紙も不足してきていたり、
「この非常時に漫画なんか ふざけてるのか！」
って空気だったり、検閲で 国策プロパガンダ以外の
娯楽作品やまして政治風刺なんかは死に体だったり、
ろくに“漫画自体が描けない”状態だったイメージがある。
>>15
漫画やアニメ絵に鼻を描くと可愛くないから描いてないだけだぞ
※34
それを逃げだと言ってるんじゃないの？
ちゃんと画力のあるひとなら鼻をきちんと描いても可愛く描ける
極端にデフォルメされた輪郭と目だけのキャラなんかでも可愛く見える。だからそこへ逃げる
日本の裁判所法廷での被告の似顔絵もリアルになる？
横顔とかは、まだ無理っぽい？
これを使えば他人の顔を拝借せずともSNSのプロフィール写真で美男/美女になれるな
2次元絵とか描くとどうなるんだろう？
あと鼻描くことから～のコメ君さ、北斗の拳とかAKIRAとかリアルなキャラ描く人の絵とか人物画を描くための本とか見たことないだろ。じゃなきゃそんな発言でてこない。最近の絵しか見てないんだろうな。
ちょっと残念な出来のフレスコ画とか埴輪の顔とかエジプトの壁画の横顔を入力してみたいな
割と故人の特徴をとらえた造形してたとわかったりしてな
漫画を実写化する時の配役のイメージソースとして使えそう
アニメキャラの顔を入れたらどうなるんだろう
興味深いね。
もしもこの先、(プロ並みの)アニメ絵にもできるようになると、ラノベの挿し絵やゲームの原画で食ってるイラストレーターは仕事を奪われてしまうかも……
へのへのもへじがどんな顔になるのか見てみたい
鼻あるじゃん
アンパンマンしか見たことないのかな
のび太だって鼻がある