PCやスマホの画像を拡大すると、それまでのくっきりとした線がぼやけてしまう。拡大すればするほどに解像度は荒くなりぼやけてしまうのだ。
まるでモザイクがかかってしまったように不鮮明な画像を鮮明に見たい。そう願うあなたに朗報だ。人工知能型画像スケーリングプログラム「エンハンスネット(EnhanceNet)」が開発されたようだ。これでもう不鮮明な画像に歯がゆい思いをしなくて済む。
AI(人工知能)で低解像度の画像を鮮明に
エンハンスネットはギザギザとしたドット絵のような鳥の低解像度写真を、くっきりとした画像に変換することができる。image credit:arxiv
前景の小枝を見れば分かるように、なんと元の写真からカメラの被写界深度まで復元してくれる。開発したのは独マックス・プランク知的システム研究所の研究者だ。彼らはこのプログラムについて「自動テクスチャ合成による超解像度の単一画像」であると説明する。
エンハンスネットは、テクスチャを合成して細部を新しく作ることで、低解像度の写真を高解像度のものにスケールアップさせる。
合成結果は非常にリアルで、オリジナルの写真と見比べても区別がほとんどつかない。おそらく人工知能が凄まじい巧みさでフェイクを使い、現実を再現した初めての事例だろう。
研究論文で紹介されているいくつもの実験によると、「高倍率における画質の大幅な向上を実現」したという。
エンハンスネットは「敵対的訓練環境におけるフィードフォワード完全畳み込みニューラルネットワーク」によってこうした画像を作り出す。つまり、他の敵対的ニューラルネットワークと同じく、1つのシステムが結果を生成しつつ、別のシステムが結果の精度を評価する。
この技術は既存のハイエンド写真スケーリング法を一気に時代遅れなものにしてしまう。既存の最新技術(左)とエンハンスネットの結果(右)を比較すれば一目瞭然だ。
image credit:arxiv
左の画像はフォトショップなどに搭載されるスケーリングに相当するもので、過度に滑らかに加工されて細部が失われてしまっている。一方、右の画像では細部まで確認できる。
アプリやOSに組み込むことも可能
開発チームのメフディ・S・M・サッジャーディー(Mehdi S. M. Sajjadi)氏は、「このアルゴリズムはフォトショップのような一般に流通するアプリにも簡単に搭載できます」と説明する。さらにスマートフォンなどのOSにも組み込むことができるという。こうすれば「スマートフォンで画像をズームした時など、リアルタイムでぼやけを鮮明に修正」できるそうだ。
また古い映画を4K画質に変換したり、印刷するとぼやけてしまう昔の家族写真を鮮明にしたりといった使い方もできる。
さらにニューラルネットワークによる画像の物体検出を容易にするといった応用も利き、グーグルの画像検索から自動運転車による歩行者の検出まで、幅広い用途が考えられるという。
他にも警察による利用も考えられる。再現された画像は本物を映したものではないが、例えば車のナンバープレートを認識する際などに有用だ。スピード違反の車を撮影する超高解像度カメラの開発を待たずとも、エンハンスネットのアルゴリズムで事足りるのである。
モザイク処理された顔画像にも適応できる
モザイクをかけられた顔写真にも応用可能だ。この場合、モザイクをかける過程で情報の多くが失われてしまっているため、再現された顔は本人とは必ずしも同一ではない。したがって裁判の証拠として使うことはできないだろうが、それでも誰だか分からなかった顔写真の特定には役立つかもしれない。
一方、プライバシーの侵害についても懸念される。プライバシー保護の目的でモザイクがかけられていたはずなのに、それを取り除かれる恐れがあるからだ。
今後は例えモザイクをかけたとしても自分の写真をネット上に投稿するのは気を付けなければならなくなるだろう。
via:tuebingen / arxiv(PDF) / fastcodesignなど/ translated by hiroching / edited by parumo
追記:2017年11月18日 一部本文を修正して再送します
あわせて読みたい
顔写真の瞳に写る真実。瞳孔を拡大することでその時一緒にいた人物をほぼ特定できることが判明(英研究)
顔を解析するだけで、テロリストや小児性愛者など、その人の素性をあぶりだす技術が開発される(イスラエル)
遺伝子トリック。親族の顔写真を半分ずつ合成したら思ったほど違和感なかった。「遺伝肖像」
顔認証アプリで本人を特定。地下鉄で見かけた人を撮影しSNSから本人を特定するプロジェクト(ロシア)
身分証明書の顔写真を全てCGで作って申請するとどうなる?受理されてIDカードができちゃった(フランス)
コメント
1. 匿名処理班
モザイク除去機か
2. 匿名処理班
TensorZoomというAndroidのアプリもこういうことできるね
監視カメラのぼやけた画像とかも鮮明にできってことだね
3.
4. 匿名処理班
これは長年の男達の夢であるモザイク外し機がついに実現しちゃう感じ?
5. 匿名処理班
わからないことが増えるって感じ
6. 匿名処理班
ついシモ方面の使い方を考えてしまうのは男の性だろうか・・・。
7. 匿名処理班
これはもう「写真」じゃないよ
AIによる創作じゃん
8. 匿名処理班
なるほど、つまりこれからはモザイク処理ではだめで、黒塗りや白抜きにしなきゃダメなのか…。
9. 匿名処理班
フィクションでは割と昔からこういうのあった気がする。
刑事モノでぼやけたカメラ映像から犯人割り出したりね。
10. 匿名処理班
別人の顔を合成した上でモザイク処理をしてがっかりさせるトラップが作れそう
11. 匿名処理班
例の野獣先輩のモザイクで試してみてほしい。
12. 匿名処理班
試したけど使えねーよこれw
13. 匿名処理班
ボカシ化して欠けた情報は無いままなんだから、
つまりAIが「たぶん元々はこんな感じなんじゃない?」って想像しながら描き直してくれるってことでしょ?
14. 匿名処理班
ブラウザに搭載できれば動画配信のデータ容量をかなり削減できて
最近の回線速度の低下問題を緩和できるんだが
15.
16. 匿名処理班
モザイクが消えるだと! 20年前遅いわ!
17.
18. 匿名処理班
映画でよくある、明らかに無理な拡大して情報を識別するとかいずれ出来るようになるのかな
(監視カメラに写った人の顔を拡大してその眼に反射してる物を識別とか)
19. 匿名処理班
オリジナル画像とオリジナル画像を加工した低解像(モザイク)画像の組を
大量に学習させる必要がある。
みんなの夢を叶えるにはオリジナル画像を大量に集める必要があるな。
20. 匿名処理班
むしろ逆に「AIによって再現されやすいモザイク」が使われるようになったりして
往年のFLMASK的な
21. 匿名処理班
これまで公開されてきたモザイク画像も今後の技術ですべて暴露されてしまうかもしれんね
22. 匿名処理班
低解像度で描いた自分の画で試してみたが、特に得るものはなかった
落書きのクリンナップを多少サボれるかと期待したんだけどなー
23.
24. 匿名処理班
昔、怪しい通販で「NASAが開発したモザイク除去装置」なるものが売られていた。でもアメリカは無修正の国なんだから、NASAがモザイク除去装置作る必要ないんだよねぇ。
25. 匿名処理班
FLMASKか。懐かしいな。
26. 匿名処理班
AIが元の画像を想像で描いてくれるってことだよね
面白いけど裁判の証拠とかにはならないね
27. 匿名処理班
モザイクを除去する機械
28. 匿名処理班
つかってみたけど
思うように効果が出ないな・・・ 何か制約があるのかな?
29.
30. 匿名処理班
※7 早稲田の「Globally and Locally Consistent Image Completion」という研究では白抜きや黒塗りの補完もされるようですよ…
31. 匿名処理班
これはちょっとよけいな機能だね
32. 匿名処理班
ドット絵のゲーム画像がどうなるのか見てみたい。
33. 匿名処理班
※13
だね。
飽くまでも推測しているだけで、影とくちばしの色の区別がついていないから、鳥のくちばしの先端が割れちゃってる。
34.
35. 匿名処理班
80年代にあったらなあ〜
36. 匿名処理班
※7
その通りなんだよねえ
まあでもAIはディープラーニングでもの凄い数の写真を見てそこから類推してるから、一般的な風景や動物ならかなり近い形で再現は出来るのだろうね
地球上(ネット上にある写真)に存在しない特殊な風景や生物的なものの類いだと上手く行かないかも知れないという懸念はあるかな
37. 匿名処理班
ブレードランナーの謎技術がついに!
38. 匿名処理班
この技術って進歩すれば本当に元画像見れちゃうようになるのかな?
モザとかぼかしって映像を見る人にも情報を共有しやすい良さがありつつ
匿名性は保つことのできるいいツールなのに。
コレが使えなくなったら映像関係の仕事してる人はつらいだろうな…
39. 匿名処理班
ひらめいた!
画像探してくる!
40. 匿名処理班
みんな心配するな。まじで性能低いから。
41. 匿名処理班
嘘から出た真ということになるのかな
わからさないナンバープレートの番号をフェイク技術で認識できるようにする
42. 匿名処理班
元より解像度が低すぎる写真は兎も角、レンズの解像力を補助するシステムとして欲しいソフトウェアではあるな
43. 匿名処理班
予想した以上に紳士的なコメントばかりで吹いた
44. 匿名処理班
フォトショップで合成したりしている身としては、良い素材なのに解像度が・・・
っていう悩みが解決して最高だ。ソフトウェア版が出たら買うわ。
45. 匿名処理班
全然鮮明にならんやんけ!なめとんのか
46. 匿名処理班
モザイクアートの写真をモザイク加工したのもは果たして復元できるんすかね?
47. 匿名処理班
20年以上前から画像アップスケーリングソフトはあるのに
そんなことすら知らない人が大勢いてワロタ
48. 匿名処理班
かなりいい感じだけどまだ甘いところがあるな
49. 匿名処理班
これSF映画とかで見たやつだ!!
ついに現実に!
50. 匿名処理班
閃いた
51. 匿名処理班
※41
アップスケーリングは周りの色から計算して画素を補完する技術
でもコレは大量のデータをもとに、こういう線と色があったらこう!という学習をして、それをもとに補完する
人間なら、粗めのモザイクがかかっていても、ホンモノを見たことがあればその部分を描き直すことができるでしょ?
もちろん経験から想像しただけだから、モザイクの下が本当にそうなってるかは保証できないが大体当たってるでしょ。
あれをやってる。
52.
53. 匿名処理班
長辺400ピクセルくらいの画像を試しにやってみたんだけど、結果はがっかりでした。顔の変なところに線が入っちゃって。
54. 匿名処理班
今まで"waifu2x"と言う似たような物を使っていたがこちらも良さそうだ
55. 匿名処理班
こんな技術を待っていたんだ長年溜めた俺の資料が火を噴くじぇ
56. 匿名処理班
水着だけくり抜いて裸みたいに見える画像あるじゃん
あれも脳内補完のせいで裸を想像しちゃうんだよね
AIに大量の裸体を学習させると補完画像造れそうだね
57. 匿名処理班
科捜研の女
「亜美ちゃん、画像を拡大・鮮明化!」
58. 匿名処理班
100x100倍超解像ってのずっと使ってるけどどっちがええんやろ
つか動画に対応してくれ
59. 匿名処理班
ついに本物のモザイク除去機が!
60. 匿名処理班
宇宙空間で撮影した写真を解析するのに役立ちそうですね
61. 匿名処理班
管理人さんリンクが間違っています。Let’s EnhanceはEnhanceNetの技術を利用したものではありません。
62.
63.
64. 匿名処理班
※13
別記事で読んだけど
ネットワーク上にあるダウンサンプリングのアルゴリズムをAIに学ばせてあって
都度適切な補間方法をAIが判断して補うとか、そんな感じらしい
原理的に高精度な補間は無理(それでも今までのよりは大分マシなんだろう)
だと思うけど、仕組みはかなりシンプルなはずなので
汎用性はかなり高いと思われる
65. 匿名処理班
子供のころはコナンザグレートのぼかしにドキドキしてました
66. 匿名処理班
つまり 戻せない
しかし、あのモザイクを補完してあるべき画像にすることは可能だろう。
67. 匿名処理班
AIが「これは鳥である」「これはシマウマである」「背景は草むらである」と判断してコマを新しく精製するんなら人間の顔、特にデータのない一般人の顔なら役に立たないでしょ
68. 匿名処理班
科○研の女とかじゃ昔から定番だったけど、つい最近までできなかったことだったの?
69. 匿名処理班
これで不鮮明な幽霊・UMA・UFO写真を処理させたらどうなるんだろww
70. 匿名処理班
つまりアレか。
71. 匿名処理班
モザイク除去するよりもまず局部を修正しなきゃいけない法律を除去しろって。今やネットで普通に見れちゃう。化石の法律。
72.
73. 匿名処理班
※41
まあ、仮にこれでナンバーっぽい物が再現できても、証拠能力は認められないだろうね
74. 匿名処理班
ハムスターの餌を買いに来たのに、泥棒呼ばわりをされて圧死したお爺さんの事件の犯人も、これで捕まらないかな?
頼むね、ほんと。