この画像を大きなサイズで見る人工知能がまた新しい凄技を身につけたようだ。モザイクのドットを完全に消し去り、リアルな顔を生成してしまうのだ。
せっかくモザイクで隠したものを露わにしてしまうのだから、いろいろと物議を醸しそうな技術ではある。
ただ安心して欲しいのは、モザイクの下から出てくる顔はあくまでAIが推測して生成したものであり、隠されていた本物の顔と同じというわけではない。なのでプライバシーが侵害される心配は一応はなさそうだ。
解像度を上げ、そこから予測される顔をリアルに生成
デューク大学（アメリカ）の研究者が開発したシステムの名は「PULSE（Photo Upsampling via Latent Space Exploration）」。元の画像から64倍の解像度の写真を生成することができる。
この画像を大きなサイズで見るこれまでの同様の技術より8倍も性能がアップしており、たとえば16×16ピクセルの画像に100万ピクセル以上を追加して、1024×1024ピクセルの画像を作り出せる。
この画像を大きなサイズで見る上段が元画像、中段が解像度を落とした画像、下段がPulseで解像度を上げ生成した画像
image by:Duke University
その仕組みは「敵対的生成ネットワーク（GAN）」という技術を利用したもの。顔の画像を生成する神経ネットワークとそのリアルさを判定する神経ネットワークを対立させることで、画像を生成するやり方だ。
PULSEはGANを通じて、モザイクで隠されている本来の画像そのものではなく、解像度を下げたときに元の低解像度画像になると思われる画像を見つけ出せす。
こうすることで、従来の技術では生じてしまっていたボヤッとした不鮮明な部分がない画像を作り出せるそうだ。
この画像を大きなサイズで見るドット絵からリアルな人間の顔を生成
この類のGANはますます複雑な作業をこなせるようになっており、たとえば昨年にはエヌビディア社がやばいほどリアルな実在しない人間の顔画像を生成するAIを発表した。
そのエヌビディアのAIは、複数の顔を組み合わせてまったく新しい顔を作り出すが、PULSEの場合はモザイク状のピクセル画像をベースとして利用する。
1つの画像からは複数の顔を生成することが可能で、人間の顔だけでなく、ネコや日没、木々や風船など、あらゆる不鮮明な画像からくっきりとしたリアリティのある画像を作り出すことができるそうだ。
なのでゲームのドット絵からリアルな人間の顔を生成するなんてことも可能。だもんだから「PULSE」のサイトではコードなどを公開しており、試す人が続出した。
絶対やる人いると思ったけどマリオ試されすぎ。
とまあ、今のところコラ職人的な使い方をしている人が多いようだが、医療、顕微鏡、天文学、衛星画像などさまざまな分野に応用できるとのこと。
この研究はCVPR2020で発表され、『arXiv.org』でも閲覧することができる。
References:duke / vice / pulse./ written by hiroching / edited by parumo
ないわぁー
名番組のヒントでピントができなくなるぞ
攻殻機動隊のキャラ凄いリアル
>>4
それだけネタツイートなのになんで紛れてるんだろうな
ネタであることに言及もせず
※13
ひと目でネタだとわかるからネタだと明記すると野暮なんじゃ
※4
スカーレット・ヨハンソンなw
ついに本物のモザイク除去機が完成したのか！
※5
全部顔になるんやぞ
元の写真の人の兄弟か、モノマネした人っぽくなるのね。
やっっとジャンプの通販に時代が追いついたか
いったんモザイク化するとき
微妙な陰影は地肌色に吸収されるためか、
全体的に、元写真よりアクが薄めで
のっぺりした顔で解析されているように見える。
特に、目つきがぼやっと力無さげ。
>>8
了解！これでモザイクの向こう側がどうなっているのか、ある程度推測できるね！
高解像度に変換するアプリで、タカトシのトシがブラジル人っぽい顔になるネタ思い出した
良く判らんけど、試みは評価する（役立つとは言っていない）
解像度低い画像って拡大するより縮小した方が見やすくなったりするし
人間の脳や目も同じようなことやってるんだろうか
リンクは、そのモザイク画像を見た印象では
もっとアゴ細めの「ヒステリックな中年おばさん教師」
みたいな顔になるかと思ったのに、
そういう下膨れお多福なのか…。
横髪の後れ毛と、頬の間の左右暗い背景が
アゴ肉～首にかけての影になってる部分と判断されたせい？
少佐はいいけど、、、
少佐がハックして手直しした可能性が否定できない
たしかマリオのモデルは任天堂がアメリカに進出したときに借りたオフィスの不動産屋マリオ・セガールさん（２０１８年没）という実在の人物だったのでは。
ゲームのドット絵についてはデフォルメがあるのでAIの方でその認識がないっぽい
おーい草薙素子はそれ実写映画のスカヨハだぞー
マリオがもはやグロ画像だな…
リンク戦いすぎじゃないか？
目のしたのクマすごいぞ
モザイク動画なら十分な情報量があるから本当に完全に元の映像が再現できる、らすぃ。
静止画だと情報量自体を削ってるからしゃあない
確かに目を細めて遠目で見るとおんなじに見える！
これの応用範囲は広いと思うよ。
例えばGoogle Earthとか見てると錯覚してしまうけど現代の最先端技術を以てしても人工衛星から撮影できる画像はまだ粗い。
高解像度の撮影も少しずつできるようになってきてるけど、解像度を上げればそれだけ写せる範囲は狭くなってしまうし、高解像度で広範囲をスキャンすれば何分何時間と時間も長くかかる。
日本の気象衛星ひまわりの空間分解能はついに1㎞を切ったけど、やはり気象には広範囲の観測が必要で、しかも偶発的散発的で局所的なゲリラ豪雨も見たいと思ったらまだ撮影能力が足りない。
広範囲を撮った粗い画像からこの記事のGANなどをはじめとした機械学習を使って微細な情報を推定し、ゲリラ豪雨が起きそうな場所に時間のかかる高分解撮影を優先的に振り分けるとか、情報収集戦略にうまく活用できれば良いと思うよ。
推定画像と実画像との差、確度がどれくらいになるのか、学習でどこまで近づけられるのか、今後に期待したいと思うよ。
ゲームのテクスチャをリアルタイムでAIが再描画までできる時代だもんなあ
いやモザイクといったら顔じゃないだろ！
>>28
このコメントへのイイネの数がw
※28
AVのモザイク破壊を同じ手法でやるのは、もうとっくに実用化して、大流行してる。
マリオの頭は帽子だと、ずっと信じてたのにっ・・・
これが実写化に伴う批判の原理
膨大な顔画像パターンからモザイク化した時のパターンが一番近い画像を生成するわけか
つまり膨大な×××の画像があれば…いや何でもない
最近の街中を撮ったテレビ映像は、やたら看板とか商品パッケージにモザイクをかけて、時代を写した風俗資料として台無しになってるんだけれど、この技術があればある程度は再現できるんだろうかなぁ。
変態紳士たちの考えてることは１つだけだな！www
「顔っぽく見える壁のシミ」を見せれば、リアルな顔を再現してくれるんだな。
できものから人面瘡とか。ちゅみみーん
ついにAIも
「幽霊の正体見たり枯れ尾花」
の領域に踏み込むんですね！ (ノД`)
「また新手か。しかし…… データにないぞ、コイツは。」
ガンダムで、データを元にして画像に補正を入れてるってのがあるんだけど、データにない奴はその分画質が悪くなるらしい。
従来の戦艦のデータしかインプットしてないところに、ズムウォルトの画像を見せたら、AIが混乱して変な画像を出してくるかもな
だめだ、このAI…
テレビの告発系の証言VTRとか、下手したら相手先に顔バレするなんてことになるんじゃ
首から下だけ映すタイプなら大丈夫だけど、モザイクかかってるタイプだと……
医療分野の画像は正解が分かるから学習させればいけるけど、
天文分野はアーティファクトが出るだけなんじゃなかろうか
少佐はあんなブサイクじゃない
マリオの正体はだいたい蛭子さんか
う～ん、AVの方は…。
これ以上は止めておこう。(笑)
※46
欧米はソッチ系のビデオにそもそもモザイクが掛からないので、そういう方面で日本の我々に需要があるような技術が生まれるのは当分後回しにされそう…
ヒゲだと思ってた部分は口だったのか
遊んでみたいけどコードが分からないの！誰かアプリにしてくれないかなぁ。
全盛期のドリフの志村けんかと思った
顔だけ？
このAIマリオの髭を口だと認識してるだろ…とんだポンコツだな
リンクめっちゃ疲れてる
ドラマや映画でよく見る監視カメラの画像を鮮明に～ができるようになったか
モザイクの画像データにはそれ以上の物はないんだから「復元」は絶対にできないんだよ。つまり創造しちゃうわけ。そんなでたらめな画像を医療、顕微鏡、天文学、衛星画像とかに流用しちゃったら拙いだろー。