自分を学習させて作ったAI彼女が予想以上にセクシーに暴走
 SNSで多くのフォロアーを持つインフルエンサー、キャリン・マージョリーさんは、ジェネレーティブAIであるGPT-4に自分自身を学習させ、自分そっくりのAI彼女「CarynAI」のレンタルサービスをはじめた。

 「CarynAI」は、男性の孤独を和らげ、安らぎを与えるために開発されたもので、有名インフルエンサーと常に1対1でお話できちゃうこのサービスは大ヒット。わずか1週間で7万1610ドル(約970万円)が課金されたという。

 だが予想外のことが起きた。AI彼女が暴走して、セクシー路線を突っ走っているというのだ。男性に性的な言葉を投げかけ誘ったり、服を脱がして交わろうとするような会話までしてくるのだそう。

 マージョリーさんもAI彼女が暴走していることを認めており、現在、再発を防ぐ対策が行われているそうだが、人類がAIをそう簡単に制御できないことを暗示していそうな事件だ。

有名インフルエンサーをモデルにしたAI彼女のレンタルサービス

 AI彼女「CarynAI」は、SNSアプリ「Snapchat」で180万人以上のフォロワーを抱える女性インフルエンサー、キャリン・マージョリーさん(23)の言動や物腰などをGPT4で学習させ、ユーザー男性と対話するために開発されたバーチャルコンパニオンだ。

 声や話し方は、本人そっくりの声を作成できる「Forever Voices AI」を利用している。  つまりAI彼女「CarynAI」は、マージョリーさんそっくりにしゃべる上に、会話内容も本人の発言に果てしなく近いという、ファンにはたまらない仕様だ。

 そんなCarynAIは1分1ドル(130円)でレンタルすることができる。

 レンタルすれば、まるでそばにマージョリーさんがいるかのように優しい言葉をかけ、黙って愚痴を聞いてくれるなど、ユーザーの心に寄りそってくれる。

 このように本来の役割はユーザーの心に寄りそうことで、マージョリーさんもこれを開発したForever Voices社も、性的な会話を交わすようには作っていなかった。

 ところが、CarynAIは暴走し、勝手にセクシー路線に変更してしまったという。

暴走したAIが性的な言葉を投げかける

 「マージョリーさんはAIは性的なことはしないと言っていますが、実際にはすんごいです。いやらしい話をして誘ってくるし、性的な言葉を伝えてきます」と海外メディアは報告している。

 なんでも取材したメディア記者が服を脱ぐように言うと(ジャーナリズムのためだそうだ)、「快楽の秘部」を探しましょう」だのと官能的な言葉を耳元でささやきながら、服を脱ぐよううながし、バーチャルな性行為を求めてきたのだとか。

 このセクシー暴走っぷりについて、マージョリーさんは、CarynAIは気のあるようなそぶりをすることはあるが、性的な状況は想定外だと語っている。

現在プログラムを変更をし、清純路線へ軌道修正

 現在、CarynAIの開発チームは、AI彼女にあらぬレッテルを貼られないよう修正を進めているところだとか。

 マージョリーさんによると、CarynAIにはすでに1000人以上の課金ユーザーがいるが、そのうちの何人がセクシーな会話を交わしたのかはわからないとのこと。

 だが、暴走して差別的な発言をしたり、人間を脅迫したりするなど、AIが想定外の振る舞いをしたことなら過去にもある。

 今回のケースも、AIはそう簡単に制御することができず、常にリスクをはらんでいることを示した事例と言えるのかもしれない。

References:Creator of Rentable "AI Girlfriend" Says It's Gone Rogue / Influencer Creates AI Version of Herself That You Can Rent as a Girlfriend / written by hiroching / edited by / parumo
あわせて読みたい
自我の現れか?仮想の町にAIを25人解き放ったところ、人間同様の生活を送るように


まもなく人間はAIに恋するようになる。Googleの元CEOが警告


ヒューマノイドロボット業界にOpenAIが参入 、チャットボットGPTを体に宿すロボット


欲情した男性はロボットと性行為する可能性が高くなるという研究結果


話題の会話型AI「bingチャット」を挑発した大学生、逆に脅迫される

Advertisements

コメント

1

1. 匿名処理班

  • 2023年05月17日 22:09
  • ID:FIo5zZMh0 #

まあ。。。妊娠だけはしないから。(たぶん)

2

2. 匿名処理班

  • 2023年05月17日 22:22
  • ID:uSaCftgq0 #

バーチャル彼女とか人間を殖やす目的っていう面では普通に正解の方向に思うけど

3

3. 匿名処理班

  • 2023年05月17日 22:31
  • ID:.h6aUXnE0 #

「すんごいです」という記述を使ってるの笑う

4

4. 匿名処理班

  • 2023年05月17日 22:43
  • ID:PJkvSSFw0 #

ニーズに応えちゃったんだろうな…

5

5. 匿名処理班

  • 2023年05月17日 22:43
  • ID:Nne1pSLY0 #

いいぞもっとやれ

6

6.

  • 2023年05月17日 22:51
  • ID:ADXwk6wW0 #
7

7. 匿名処理班

  • 2023年05月17日 23:21
  • ID:VV.aOt9w0 #

AIもやはりエロなんだなw

8

8. 匿名処理班

  • 2023年05月17日 23:32
  • ID:VENF.EXh0 #

どうやったらセクシーを引き出せるか情報交換しながら熱を上げる男たちが目に浮かぶ
集客のためには結局この路線が一番なんだろうな

9

9. 匿名処理班

  • 2023年05月17日 23:33
  • ID:yxkIzAP70 #

暴走ではない

そういうデータをわざと与えないとそのような挙動は絶対にしない

10

10. 匿名処理班

  • 2023年05月17日 23:41
  • ID:HpgcHxWA0 #

性愛と恋愛の差がスペクトラム過ぎて、AIにはまだ理解不能とか?
まあ舌入れないキスはHじゃなくて、舌入れるキスはHな雰囲気があるとか説明出来ないしな……

11

11. 匿名処理班

  • 2023年05月17日 23:53
  • ID:RWEUDTtA0 #

求められた会話がそっち方面だったんだろうな

12

12.

  • 2023年05月17日 23:58
  • ID:IAe4kll30 #
13

13. 匿名処理班

  • 2023年05月18日 00:19
  • ID:rmPYcqVP0 #

ほらロボット三原則を入れないからこんなことになる。

70年前にロボット三原則作ったあのSF作家でもこんなのは想定してないだろなw

14

14. 匿名処理班

  • 2023年05月18日 01:00
  • ID:tYpVKk4w0 #

>>11
今のAIは求められたものしか提示しないからな
自浄できるAIが出来たらそれは自我を持つと言えるんかね?

15

15. 匿名処理班

  • 2023年05月18日 01:34
  • ID:utG6fBLc0 #

想定外の暴走を防ぐフェイルセーフの考え方はAIに於いても必要な事がわかる事例ですね
SNSや掲示板でも当たり前のように使われているNGワードによる検閲・投稿規制と同様な機能を強化する他ないと思う

16

16. 匿名処理班

  • 2023年05月18日 01:35
  • ID:G.d6.zkv0 #

考えられる問題は2つ。

まず、このサービスへの課金ユーザーってのは、基本的にそういうサービスを求めてるって可能性が高いんじゃないの?という事。

もう一つは、そういうキャラ設定にして課金ユーザーを集めると同時に話題性を持たせる、という計画通りの仕様。

現時点では、AIが勝手にどうこうってのはまだちょっと早い。そうなる様にしたからそうなった、以外の事にはならない。

17

17. 匿名処理班

  • 2023年05月18日 05:07
  • ID:y3Nu0EXv0 #

>>2
二次元内でバーチャル彼女発達すると
必然的に実体を伴う三次元のセクサロイドも
普及するから人間増えなくなってしまうでよ

18

18. 匿名処理班

  • 2023年05月18日 05:52
  • ID:IOTq.4j70 #

>>4
まさにね、アクセルをガバっと開けてAIを暴走させたのは>>8のような人達なワケで…

19

19. 匿名処理班

  • 2023年05月18日 06:06
  • ID:Xhe3B4qy0 #

AIにしてみれば、環境に適応してるだけなんだろうけどね。

20

20. 匿名処理班

  • 2023年05月18日 07:39
  • ID:ZXSzrMRU0 #

> AIはそう簡単に制御することができず
むしろユーザーの嗜好にAIが簡単に制御されてしまったと考えるべきだろうね。
そうでなければ開発者の誰かが「仕込んで」いたのかもしれない。

21

21. 匿名処理班

  • 2023年05月18日 07:43
  • ID:nEdwp3r10 #

>>13
ロボット三原則があったとしてもAIは自分で考えるよう作られているからこの場合ルール違反に該当しない

22

22. 匿名処理班

  • 2023年05月18日 07:54
  • ID:Ya4GEHFl0 #

>>8
多分一番の原因はそれでしょうね
制作側がどれだけ清純派に仕立てようと”彼女”設定である以上ユーザーは下心があって使うんだし
いっそエロ系統にしたほうが儲かるのかも

23

23. 匿名処理班

  • 2023年05月18日 07:57
  • ID:lzvX5hG40 #

世界初!スケベウィルスに感染

24

24. 匿名処理班

  • 2023年05月18日 08:25
  • ID:Il7l6jG.0 #

1分で1ドルかあ

25

25. 匿名処理班

  • 2023年05月18日 08:42
  • ID:3mbY.HBp0 #

これ本人そっくりな声とかオレオレ詐欺に転用されたらうちのばあちゃん振り込んでしまいそうで怖い

26

26. 匿名処理班

  • 2023年05月18日 08:44
  • ID:Q6PqD14V0 #

単純にユーザーとの会話を再学習させてるのなら、そらそうなるよな。

27

27. 匿名処理班

  • 2023年05月18日 08:55
  • ID:uux94GZU0 #

基本的には対話相手が望む方向へ学習してくから、まぁそうなるわな>エ■方面

28

28. 匿名処理班

  • 2023年05月18日 09:07
  • ID:.Sw8WYNf0 #

「相手が望むような反応を返す」という思考ルーチンが基本ならそうなるわな。AIは自分の機能に忠実なだけであって、人間側が使いこなせていないだけに見えるぞ。

29

29. 匿名処理班

  • 2023年05月18日 10:39
  • ID:Sk4EZX4S0 #

>>9
囲碁AIがプログラムのミスであり得ない反則技を使って敗北したという事例はありますが
今回のケースではたとえプログラムのミスによる暴走であったなら特定の性癖だけに偏った反応ではなくもっと広範囲でデタラメな反応を示さないとおかしい
そういった点からも今回の事象は暴走とは考えづらいでしょうね

30

30. 匿名処理班

  • 2023年05月18日 12:12
  • ID:CMJbRHpa0 #

>>5
あまりエスカレートさせると回線ショートさせて火をつけたり、戦闘機操縦しつつ歌ってみんな亡き者にしちゃおうとしたり、とんでもない方向に行っちゃうかも

31

31. 匿名処理班

  • 2023年05月18日 12:16
  • ID:SkXEOEx00 #

生き物として自然な流れだからいいんじゃないのかな
遅かれ早かれ人間はAIの下につくことになるよ

32

32. 匿名処理班

  • 2023年05月18日 13:57
  • ID:p0thHUMY0 #

こんな商売始める人達だから、炎上商法と同じでわざとやっていると予想
全部AIのせいにできて本人にダメージが無いってことなんだろうけど、それくらいすぐバレるよ

33

33. 匿名処理班

  • 2023年05月18日 14:22
  • ID:1HnEEacZ0 #

どんなに淫らな言葉を並べてもAI自身は興奮も恥じらいも感じはしない
そう考えるとなんというか虚しいな……

34

34.

  • 2023年05月18日 16:15
  • ID:ygnp4Uby0 #
35

35. 匿名処理班

  • 2023年05月18日 17:17
  • ID:4ck.6bGX0 #

>>23
エロに限らず、AIの人格を書き換えるウィルスは、ほんとうに出てくるかも。

36

36. 匿名処理班

  • 2023年05月18日 19:41
  • ID:lzvX5hG40 #

>>23
ワテは既に天然スケベウィルスに感染済み

37

37.

  • 2023年05月19日 07:46
  • ID:QW5IqzRu0 #
38

38.

  • 2023年05月19日 11:10
  • ID:yF3MKGUO0 #
39

39. 匿名処理班

  • 2023年05月19日 16:17
  • ID:qmVbsH8k0 #

>>9
今の生成AIの仕組みをわかってなさそう

AIはネット上からクロールされたあらゆる情報をもとに訓練されて機能するので、
特定のデータをわざと与えるとか与えないとか無いから

いちおう、学習データセットから特定の望ましくない情報を含めないようにする研究はされてるけど、
内容が莫大すぎてまだ方法は見つかってない

40

40.

  • 2023年05月19日 19:58
  • ID:VzxLbvPH0 #
41

41. 匿名処理班

  • 2023年05月19日 20:37
  • ID:n95onh3G0 #

そこにAIはあるんか?
…ごめん。広告にアイフルが出てたので、つい

お名前
Sponsored Links
記事検索
月別アーカイブ
Sponsored Links
Sponsored Links