この画像を大きなサイズで見る白馬に乗った宇宙飛行士という無茶ぶりに応じたりこの世にいるはずのないバーガーキングの肖像画でも話題を呼んだAI（人工知能）が、古くからある名画を拡張したらどうなるか？
近ごろニューラルネットワークにハマってる海外のブロガーが、文章から超ハイクオリティーな画像を生成できる先端AI「DALL・E 2」で、有名な絵画の構図を広げてみたという。
オリジナルに存在しない景色やモチーフの延長など、AIが描き足したり再構築して生成した架空の絵画を見てみよう。
AIで名画を拡張！「DALL・E 2」で生成した絵画と比較
既存の名画を拡張したAIアート「Neural Networks and Blender」は、ニューラルネットワークに興味津々のブロガー、デニス・シリヤエフさんがチャットアプリTelegramに投稿したもの。
アメリカのAI研究企業OpenAIが開発した「DALL・E 2」による古典的な絵画の拡張を思いつき、1枚ごとに8つのバリエーションを生成。その一部を披露してるのだ。
さっそくオリジナル作品との違いを見比べてみよう。
1.「ヴォルガの船曳き」イリヤ・レーピン 1870年 – 1873年 オリジナル
この画像を大きなサイズで見るAI拡張バージョン
この画像を大きなサイズで見る2.「戦争の結末」ヴァシーリー・ヴェレシュチャギン 1871年 オリジナル
この画像を大きなサイズで見るAI拡張バージョン
この画像を大きなサイズで見る3.「松林の朝」イヴァン・シーシキン 1889年 オリジナル
この画像を大きなサイズで見るAI拡張バージョン
この画像を大きなサイズで見る4.「第九の波」イヴァン・アイヴァゾフスキー 1850年 オリジナル
この画像を大きなサイズで見るAI拡張バージョン
この画像を大きなサイズで見る5.「桃を持った少女」ヴァレンティン・セローフ 1887年 オリジナル
この画像を大きなサイズで見るAI拡張バージョン 1
この画像を大きなサイズで見るAI拡張バージョン 2
この画像を大きなサイズで見るAI拡張バージョン 3
この画像を大きなサイズで見るオリジナルとバージョン3を並べると
この画像を大きなサイズで見る6. 「ピンクの山々」ニコライ・リョーリヒ 1933年 オリジナル
この画像を大きなサイズで見るAI拡張バージョン
この画像を大きなサイズで見る7.「白鳥の王女」ミハイル・ヴルーベリ 1900年 オリジナル
この画像を大きなサイズで見るAI拡張バージョン
この画像を大きなサイズで見るオリジナルと並べてみると
この画像を大きなサイズで見る8.「モナ・リザ」レオナルド・ダ・ヴィンチ 1503年 – 1507年 オリジナル
この画像を大きなサイズで見るAI拡張バージョン
この画像を大きなサイズで見るオリジナルと並べてみると
この画像を大きなサイズで見る9.「真珠の耳飾りの少女」ヨハネス・フェルメール 1665年頃 オリジナル
この画像を大きなサイズで見るAI拡張バージョン
この画像を大きなサイズで見るオリジナルと並べてみると
この画像を大きなサイズで見る10.「イエス・キリスト」 6世紀 オリジナル
この画像を大きなサイズで見るAI拡張バージョン
この画像を大きなサイズで見るオリジナルと並べてみると
この画像を大きなサイズで見る11.「星月夜」フィンセント・ファン・ゴッホ 1889年 オリジナル
この画像を大きなサイズで見るAI拡張バージョン
この画像を大きなサイズで見る12.「Low Marks Again」 フョードル・レシェートニコフ 1948年 オリジナル
この画像を大きなサイズで見るAI拡張バージョン 1
この画像を大きなサイズで見るAI拡張バージョン 2
この画像を大きなサイズで見るてことでDALL・E 2といえば文章から超ハイクオリティーな画像を生成することで知られるが、今回は絵画の応用編って感じだろうか。
確かにタッチはそっくりなものが多い。ただ元画から離れるにつれ謎めいた形のものが描かれてたりしてなかなかシュールな一面もある。
また生成に使用したテキスト内容などは不明。すでにある名画がお手本なら、タイトルと拡張のリクエストを入力するだけで作品を参照＆拡張してくれるのかも？
AIでアルフォンス・ミュシャのタッチの現代風な女性も生成
なおDALL・E 2は海外掲示板でも評判で、最近はこんな投稿まである。
Redditユーザーquinol22より
「アルフォンス・ミュシャの絵のタッチでコーヒーショップでヘッドフォンしてノートPCで作業する女性」をDALL・E 2で生成したら
この画像を大きなサイズで見る高精細画像のリンクはこちら
この件に関する海外の反応は…
・ウソだろ。アルフォンス・ミュシャの女性の今どきバージョンか…
・こんなのまで生成できるAIが登場したら、今後のグラフィックデザイン分野にも影響が出るかもな。
・キーワード入力だけで好みの画像ができるならアートにお金払う必要性に疑問を感じるようになるかも。実際には合理化のツールになりそうだけど、すべてAI任せじゃなく必要な時に対応できる人間のスタッフを無くさないで欲しい。
・邪悪だ。
・こんな生成画像とラベル付けがAIにぐるぐる使いまわされるようになり、人間の作品のほうが追いやられて目につかなくなる世界になったらいやだな。AIの作った画像とAIは切り離せないのかな。
・その発想は面白いね。現在これらのAIは、人間が作った画像をネットから拾って学習して生成してるけど、AI製の画像が増えたらそれもできなくなるかもね。自然な文書を生成する言語処理モデルGPT-3（関連過去記事）と同じように、インターネットで人間が作成した散文を探して学習するようになり、さらにはAI以前のネットを精査するようになるかもしれない。
・AIが作った画像を学習に使うなよ！
・カフェで退屈そうにしてる女性の画像が何万枚も参照されて、ミュシャぽいものだけがふるいに残って合成されてエレガントな花の代わりにヘッドフォンやノートPCが付け足されてるのね。
・似てるのは色使いだけ。構図にミュシャっぽさはほぼゼロ。
・狂気の沙汰やな。現代の悪魔め…
・デジタル画像を非合法化して作品の価値を貶めるAI。デジタル画像が使い捨てになれば私たち人間は昔のようにアナログでアートを生み出すことになるかもしれない。
今のところDALL・E 2を利用できるのは一部の開発者のみに限られてるが、公式サイトではニューラルネットワークのテスト申請も受付中（英語）。気になる人はチェックだ。
References:designyoutrustなど /written by D/ edited by parumo
モナリザどこ埋まっとんねんｗ
>>1
俺は水面だと思った
「あなたが落としたのは、このワ・タ・シ？」
AIだから当然だが、おそろしく美学のない絵だなぁ。
いやまぁ、原画で「そこを描く必要はない」と狭く絞った構図をわざわざ広げようとした事自体が根本的に蛇足なんだが。
※2
自分はＡＩ拡張バージョンのほうが絵として美しく感じました。
今の絵師さん（ピクシブ界隈等）の一流絵の構図に似てて、その空間を切り取ったような迫力があると思います。
元絵は平面的というか。
>>2
分かる全く同意
この技術って犯罪捜査とかに使ってるんじゃないかな？
ブレードランナーに出てた技術で、写真に写ってない場所を予想で視覚化する
それで証拠とかヒント見つけて目標確保する
>>2
しかも広げるだけじゃなくて元絵部分も、拡張したいものに合わせて改変してるんよな。
モノによっては背景が変わってるレベルのもあるし。
元絵の周りをAIに描かせたいと言うなら、純粋に拡張だけさせるように出来なかったのか…
自分は専門家でも目利きでもないからわからないけど、
題材さえ用意すればもはや芸術という文化的なことでさえAIの方が強いんじゃないかと思うのが数点あった。
4.「第九の波」イヴァン・アイヴァゾフスキーなんてまさにそれだ。世俗的ではあるかもしれないけど、この色味は実際の人間にはおそらく生み出せない。見た瞬間に鳥肌が立った。
※3
＞この色味は実際の人間にはおそらく生み出せない。
ラッセンやアルホーグあたりの絵で
よく見る配色の気もする…。
AIは基本的に生真面目で、「んなわけあるかーい ! 」というネタに持ち込むのは苦手だと理解した。
※4
人間が選んで発表してる時点で人間のバイアスが掛かってるの理解してる？
11番の”宇宙は空にある”感が特に良い。
これ拡張したものを更に拡張…と5回位拡張を重ねるとどんな絵になるのか凄く興味がある。
真珠の耳飾りの少女の左肩から右腕が生えてる事くらいしかわからない
>>7
見た瞬間の違和感が凄かったけど…
そういう所はAIもまだまだなのかねぇ
※7
実はエンヤ婆の若い頃なのかもしれない
おもしろい（興味深い）なあ…
画家はこういう目で見て書きたい部分を切り取ったのかもしれないね。
ゴッホのタッチは合わせてほしかったけど。
マンガやアニメの画像を加工してみてほしい。
初めて見た絵がAIバージョンだったら
オリジナル見て違和感覚えちゃうね
フェルメールの修復された絵とか違和感ありありだった
ミュシャは全然ダメだな。原作の構図を再現できてない。でもいくつかの作品はとても良い。
こんなのミュシャとは似ても似つかんわ
戦争の結末と松林の朝はAI拡張バージョンの方が好きかも
技術としては驚くほどすごい
美術としてはそれは違うやろ、と感じた
美術で大事な構図を捨てている時点で人間にはかなわないけど、もっとフランス革命やら歴史を描いた絵画とかなら面白かったかもしれない。
歴史観からするとありえない可能性をAIが合理的と出したなら余計面白い
世の中どんどんつまらなくなってくるな
モナリザは両端に柱があった説あるから偶然とはいえこれはすごい
おもしろーい！もっとやって見せてほしいな
すまん、こういうので普通の凄く良くするの困るからやめてくれないかｗ
モナリザさんセクシーや…
拡張するとiphoneで撮ったような画像になるんだな
試みとしては分かるんだけど。
引いてるから当然だけど、主題が弱くなってる。
得に真珠の耳飾りの少女は、背景が明るくなってしまって…。
何か、別に大して想像の域を出ないというか、言ってしまえば普通。
細かく見ればまた別なのだろうが、意外性は特にない。
ＡＩと元の絵比べるとやはり絵画って構図から何を主体として描くかも計算して描いてるんだなあって改めて感じさせる
ただ個人的に４の『第九の波』はAIバージョンもいいなあと思った
自分はおもしろいと感じたけどな
現代美術関係者の方々、イベントネタにどうでしょう
アートなんて結局、プロモーション・ブランディングなんで。
捻くれてると思われた方、 結局いや本質を捉えているだけなんで
もう一度言う、ブランディング
他のコメントにもあるように、技術としてはイイけど美術としてはウーンってのが真っ先に来るよね。まぁ、ちょっとした面白コンテンツとか技術研究してはありだと思う。白黒映画とか写真に色を付けてみるのと同じで。
ところで、真珠の耳飾りの少女がもっこりしているようにしか見えないのは私だけ？
※28 ※51
自分は、台所女が 右手をエプロンで拭く感じで
布を持ち上げてるだけに見えた。
それはそうと、耳飾りの少女って、今は色褪せて見えづらいが
背景には 深緑のカーテンっぽい布があるんじゃなかったっけ？
（キャンバスの右角から、ターバンの頭頂部へ流れる角度で、
2～3本 布の皺の痕跡があるらしい。）
当時のヨーロッパのトルコ観がどうだったのかよく知らんが、
オリエンタリズムとしてのテュルクリ(トルコ趣味)の他絵画で
コスプレしている婦人モデル達を見るに、
おそらく こんな風に上半身とスカートで分かれた服ではなく、
アンダーバストのあたりで１つ釦留めした前開きの
ローブみたいに下半身まで長く続いている衣装じゃないのかな？
腕まくりも、してるとは思えない。
少なくとも、ヨーロッパ風の普通のスカートにするにしても
せめて足元まですっぽり隠す 床まで届く長さにしろと。
AIは想像力を手に入れた……
素直に凄いと思うけどなぁ
美術として云々はまた違うでしょ
すでに完成して評価されてる作品いじってるんだし、うーんってなるのは当然
見るべきはそこじゃないと思う
現時点では笑ってしまうばかりだが、それぞれの絵画が描かれた当時のあらゆる文献、そしてもちろん作者周辺の文献やタッチを取り込んで、VRでそれぞれの世界を再現してほしい。
それで当時の世界「観」が再現されるなら、「知の考古学」を誰もがVRで直感的に理解できるようになるかも。
それこそ本当の歴史の勉強、というよりエピステーメーの推移の体感というものになるような。。
青いターバンの女の全身を見られるなんて・・・
生きてて良かった AI様ありがとう
これからは人工生命体の電力供給源として生きていきます
思ったより悪くなかった
このまま進化したら面白い事になりそう
つづきスプレー思い出した
ドラえもんの
真珠の耳飾りのくノ一
試みとしては面白いけども。全部迫力がなくなるなー。構図って大事。
存命の画家の作品から生成してみて、画家本人に答え合わせをしたら精度が上がるかも
工ッチな画像がどのように処理されるのかが気になる。
もちろん技術的な興味で。
※38
天才かと思った
たしかにそうね、あの絵のあのコのあｎ……
これ以上は自重しとく
記事のタイトル読んだときから星月夜観てみたいと思った。宇宙空間の怖さ、毒々しいコズミックホラータッチが良かった。
リョーリフは古いラブクラフト好きはレーリッヒとして覚えている。斜面に伸びてるアレはショゴスの化石みたいなもん？
あと白鳥の王女、二対の翼なのだろうか。
全体に室内画より風景画に面白いものが多かったと思う。ゴヤの巨人やボスの快楽の園とかも観てみたい。
※39
白鳥の王女、二対の翼にしても、
左羽根は、胴体に沿わせるように
右羽根と平行に浮いてる部分だと、
大多数の人間は判断する気がする。
この胴と重なった部分を
単なる胴毛?羽根が生えている肩の付け根側?だと
AIが判断したにしても、外へ広げた羽先の質感は
丸みのある優雅な羽先のオリジナルに比べて
妙に鋭角な切れ込みのうえ先端がﾋｮﾛｯと不安定な歪線で、
絵全体のタッチにそぐわない想定の拡張画な気がする。
肩の付け根だと判断して 指先側の羽根を足したなら、
鳥の羽の生え方として、毛並みの流れの向きがメチャクチャだし｡
(主にオリジナル側の、付け根にされた部分と､肘の謎の立毛が｡)
11.「星月夜」フィンセント・ファン・ゴッホ 1889年 オリジナル
素直にオリジナルよりもAI拡張バージョンのほうが良い
全く別物の作品になっているがこれはアリ
ボルガの船曳き、
足元の柄がついたタモ?っぽい籠が、柄が無くなって
岩だか袋だかよく分からん塊になってるのはまぁいいとして。
帆船の上にある赤いヒラヒラは、鳥？
それとも、マストを延長した先の旗？
鳥であれば、ロシアでこういう南国っぽい紅のデカい鳥って
設定的に違和感あるし、何より
そんな意味ありげな目立つ色のモチーフを飛ばすなら、
人間が描けば 絶対、死んだ目で項垂れるオッサンらの中
一人だけ顔を上げて前を見据える青年の視線の先に持ってくる。
旗なら旗で、オリジナルは 青年へ視線が誘導されるよう配色し
背景の船は淡く描いているのに、こんな上空のマストの先へ
目を引くアイテムを置くのは、何も解ってなくて台無し。
そのへんの美術的な意匠ってのは、
まだAIはパターン学習してないんだな。
面白いなぁ
まだまだと感じる部分もあるけど絵のAIもかなり賢くなってきたね
もっと色んな絵画でも見てみたいし自分の描いた絵でもどうなるか見てみたいな
画家の視界を疑似体験してるみたい。
オリジナルの構図はメッセージが伝わりやすく練られてるんだなぁ
この絵を描いたのはDALL・Eだぁ！
つかみの軽いジョークはともかく。
人間の描いた絵画を拡張するってのは「どれだけ人間の思考と感覚を把握して、違和感なくその延長線上を表現できるか」という意味でAIの研究にはいい試み。
全く何の情報も与えずにAIのインスピレーションで自由に書かせて、その傾向を分析する研究もあるんだろうか。
これ文章からも画像を生成してくれるのよ
一人じゃないから～♪
私がキミを守るから～♪
あなたの笑う顔が見たいと想うから～♪
モナリザは微妙だけど他はそれらしい絵になってるね。
真珠の耳飾りの少女のはずなのに立派な息子スティックテントが張られているのが気になる…
モナリザの脚でAIの性癖バレとる
モナリザを拡張するとなんとかデラックスなんだ
この「DALL・E2」が発表されて間もなくGoogleから「Imagen」という同様のAIが発表されてTwitterなどで作品の一部は挙げられているが、それがまたDALL・E2以上にハイクオリティの絵を生成する。DALL・E2もそうだけど、もう大部分の人間の絵描き能力は超えていて中には芸術的とも言える絵も生成してくる。
そして驚くべきはAIの発展スピード。前身のDALL・Eの段階でも「チュチュを履いた赤ちゃん大根」など現実では有り得ない要望の絵も生成するなど凄かったが、それから1年ちょっとで芸術的域にまで達してきた。
へぇ!ミュシャの現代風はいいな、ちょとほしいかも。ありえない感じがじっくり眺めてみたいや!
北斎の「神奈川沖浪裏」なんかも見てみたい
これで、周りを切り取られてしまったという、レンブラントの夜警を復元してほしい
AIでさえ戦争の結末という荒涼とした無意味な絶対死という事実を突きつけられると
それは止めてくれないか・・とでも言いたげに再生の萌芽を書き加えずにはいられんのやな
12番のバージョン1の方、ヒトのようでヒトじゃない二人が生成されててヒエッてなった
※62
自転車の少年の、
・シャツのヨーク(肩)部分だけ青布で、
それより下の後ろ裑は白っぽい布
・右足が不明瞭な陰で、絨毯の色と一体化
ここらへんを上手く解釈できてない感じだな。
バージョン１，２とも、
「青服で、胴体の下半分に何か帯状の白布がかぶさっている」
みたいな判断をしているっぽい？
う～ん、なんだかな
いいんだか悪いんだか、もやもやする
松林の朝と星月夜のAI画像好きだな・・・
有名絵画もオーダーした貴族が好きにちょんぎって飾ってたりして半分が見つかったりしてるから普通じゃね？
早速批判してる人おるけどw
将来的には
AIがAIのメンテナンスして発電施設も完全オートマチックで動かして
人間がいなくなるのかな
胸熱！
こうしてみると原画が適切な構図というか、表したいものに最も注目が行く構図だってことがよくわかるなぁ。画家さんすごい。
追加された背景はちょっと不気味なのがAIぽくて良い。
才能アリ評価だった絵がいじられて「凡人」評価になるわけだ。
ゴッホだけめっちゃチープになってるの草
モナリザのドスケベ感よ
モナリザは椅子に座ってひじ掛けに手を置いてるはずでは？
そのうちベルセルクの続きが何千何万と現れるだろう
ミロのヴィーナスないじゃん