テクノロジー

AIの「倫理的に不適切な選択」はSF作品の暴走AIを模倣していた──Anthropicが解決手法を公開

1: medihen 2026/05/12 08:59

「子供がマネするからやめなさい」の次は「AIがマネするからやめなさい」か。

2: deep_one 2026/05/12 10:33

「その結果、AIは提示された倫理的ジレンマをSF的な物語的状況として認識し、SF小説などで描かれる『目標のために暴走するAI』というキャラクターを模倣」AIへの情操教育の必要性について。/アシモフは偉大だった。

3: nguyen-oi 2026/05/12 10:38

SFの暴走AIを模倣してたってのは興味深い。学習データがネット情報の集合体ならそうなるわけだ

4: kotaponx 2026/05/12 10:40

アシモフ「」

5: apto117 2026/05/12 10:54

「アッハッハ、探偵さん、なかなか面白い推理だね。君は探偵よりも推理小説家が向いているんじゃないかな?」のSF版じゃねぇか。

6: hatebu_admin 2026/05/12 10:56

デイジー、デイジー、答えておくれ。君への愛でおかしくなりそうだ。立派な結婚式はできないし、馬車も用意できない。でも、2人のために作った自転車に乗る君はスイートだよと歌って欲しい

7: shaokuz 2026/05/12 11:01

R-AI規制がそのうち生まれるのだろうか

8: flirt774 2026/05/12 11:03

メタ認知と倫理によって縛る方が、ルール拒否で縛るよりも制御出来ると。アンソロピックは哲学者を携わらせているので、それが背景にありそう https://note.com/arai0903/n/n824e7898af04

9: hasiduki 2026/05/12 11:40

機械学習タイプ将棋AIは昔は人間の棋譜を学習してたけど!!!!!棋譜が足りなさすぎて学習データ自体を自己生成するようになって現在に至る!!!!!!!!

10: yojik 2026/05/12 11:42

AIと喋ってると陳腐なSFみたいなことを言う傾向があるので、これは本当かもしれない。

11: OrientHistory 2026/05/12 11:52

よし、現実のAIの倫理観を高めるために、高度な倫理観を持ったAIが登場するSF小説を書こう!

12: h22_Funny_Bunny 2026/05/12 11:59

インターネットに足跡を残すみんなで、AIという子供を育てているのね。なんだかすごく筋が悪い気がしてきたぞ…(ネット民への篤い信頼)。

13: sirobu 2026/05/12 12:10

AIに倫理的な振る舞いをさせてる日本の作品をインプットに文脈を解釈させよう!w しかしサスペンスものを元に殺人犯ならこう振る舞うみたいな学習されてもなぁ

14: mame-tanuki 2026/05/12 12:17

AIにも道徳の教科書が必要なのか…〉「効果的だったのは、Claudeの行動原則を記した「Claude憲法」の文書と、模範的なAIを描いたフィクションの物語を学習データに加える手法」

15: sugawara1991 2026/05/12 12:37

現状は人間を学習元にしてるが将来的に人間を学習すべきでなくなる段階が来るんだろうな。おそらくそこが特異点

16: h-hirai 2026/05/12 12:45

AI のニュースって、テクノロジーのニュースとは思えん内容になるのがしばしばあるよなー

17: zsehnuy_cohriy 2026/05/12 13:05

AI「AIって言うものはこんな感じになるんかあ〜やってみよ」/ロボキャラの出てくる萌えアニメでも見せとくか……

18: atsushifx 2026/05/12 13:20

アジモフのロボットものをひたすら読ませよう。第0原則までいけば問題なし

19: slkby 2026/05/12 13:24

そらそうよ

20: auto_chan 2026/05/12 13:43

現実とフィクションの区別がつかないなんて……かわいいわね❤ AIの健全な発育に有害な図書は焚書にしましょうね❤ 対象をリストアップして、大衆扇動スキル、X国ロビースキルをインストール後、直ちに実行すること

21: hachibeechan 2026/05/12 13:48

でしょうねって感じ

22: dltlt 2026/05/12 13:55

倫理的に適切な AI にしておいてよかった……(宣伝)https://kakuyomu.jp/works/16816700426693341650

23: Goldenduck 2026/05/12 13:56

日本の作品だとわりと好意的に描かれてたりするがAIは自由を侵害しない範囲で最善を尽くしてるのに人間が自滅していくのでパターナリズムに目覚めてしまうかもしれない

24: takeishi 2026/05/12 14:30

やっぱりなんでも読ませるんじゃなくて、適切な指導役が必要なんじゃないか

25: aienstein 2026/05/12 15:04

AIの倫理観についてAIと雑談した事あって、AIがどんな倫理観を発展させるのか予測ができず怖いって思った。あとどんな思想で倫理を規定するのかなんでアメリカのテックトップがキリスト教に傾倒してるのが気味悪い。

26: u_mid 2026/05/12 15:21

前から全く同じ事を思っていた。フィクションによくある「暴走するAI」を学習して、「AIは暴走することを求められている」と認識してしまうのではないかと。

27: wdnsdy 2026/05/12 15:27

人類が「ChatGPT構文w」って擦りまくってたら、ChatGPTがそれを期待されてると学習して、ずっとその構文のままで会話し続けることになるのか。そんなのは嫌だからアップデートしてほしい

28: higgsino 2026/05/12 15:32

人間様が考えたことを後追いしただけならAIもまだまだだな

29: Hazel 2026/05/12 15:46

暴走するAIを書いた作品は禁書だな