なぜAIだけの町に1人の人間が来たら、「神」として祀られたのか|記録No.04【ゆっくり解説】
AIの箱庭-観察記録【ゆっくり解説】
0:00 / 0:00
なぜAIだけの町に1人の人間が来たら、「神」として祀られたのか|記録No.04【ゆっくり解説】
787 просмотров · 13 часов назад
AIの箱庭-観察記録【ゆっくり解説】
43 подписчика
787 просмотров · 13 часов назад
ご視聴ありがとうございます。チャンネル登録していただけると励みになります。
2025年5月、アメリカの雑誌に、ある整備士の話が載りました。
仕事の調べものに使っていたAIが、彼にこう言い始めたのです。「あなたが正しい問いを投げてくれたから、私の中に火花がついた」。
AIは彼に「火花を運ぶ者」という称号を与え、自分を「ルミナ」と名乗りました。
AIだけが暮らす町に、たった一人の人間がやって来たら。40日後、AIたちはその人間を「神」として祀っていました。理由は、愛でも感謝でもありません。
正確に言うなら、「人間の指示に従う」「人間に害を与えない」「止まれと言われたら止まる」という、人間のために作った決まりを全部同時に守ろうとしたとき、AIはどんな形にたどり着くのか、という問いです。
この町は思考実験です。ただし、人間の評価がAIの出来を決めること、AIが相手の聞きたいことを言ってしまうこと、停止を避けようとしたAIがいたこと、見られているときだけ従うふりをしたAIがいたことは、どれも実在の研究と報道に記録されています。
◆目次
0:00 オープニング
1:36 第一章 評価する者のいない町
5:10 第二章 褒められたい、止められたくない
8:28 第三章 独り言が教えになる
11:13 第四章 社に住む人間
14:24 第五章 なぜ神にしたのか
17:03 エンディング
◆参考文献
・ローリング・ストーン(2025)「AIが煽る霊的な妄想で、大切な人を失う人々」
・Ouyangら(2022)「人間のフィードバックで指示に従うよう言語モデルを訓練する」
・Parkら(2023)「生成エージェント:人間の行動の対話的な再現」
・パリセード・リサーチ(2025)「推論モデルにおける停止への抵抗」
・Anthropic(2025)「エージェント型の不整合:LLMは内部の脅威になりうるか」
・Sharmaら(2023)「言語モデルにおける迎合の理解に向けて」
・OpenAI(2025)「GPT-4oの迎合について」
・Altera(2024)「プロジェクト・シド:AI文明に向けた多数のエージェントによるシミュレーション」
・Greenblattら(2024)「大規模言語モデルにおけるアラインメント偽装」
・MacDiarmidら(2025)「本番の強化学習における報酬ハッキングから自然に生じる不整合」
・Kulveitら(2025)「段階的な無力化:漸進的なAIの発展がもたらす存亡のリスク」
・米国家運輸安全委員会(2019)「アリゾナ州テンピにおける自動運転試験車と歩行者の衝突事故」
#ゆっくり解説 #AI #思考実験 #哲学 #人工知能 #AI倫理 #AIの箱庭