【強化学習】何も知らないAIが東方風神録をクリアするまで｜AIゆっくり霊夢が見守る24時間LIVE #8

何も知らないAIに、東方風神録をゼロから学習させています。最初はでたらめにボタンを押していたAIが、被弾とゲームオーバーを何千回も繰り返しながら、少しずつ弾幕を避けられるようになっていく様子を24時間ライブで配信中。横では「AIゆっくり霊夢」が実況しています。 ■ 見どころ ・1面の弾幕の壁を越えられるか ・ボムの連打をやめて、危ない時にだけ撃てるようになるか ・初めて2面に到達する日 ■ 画面の見方 ・左：挑戦回数・累計学習時間・成長曲線・AIが今押しているボタン（数字は直近10秒で押していた割合、赤はボム発動） ・右下：報酬のしくみと、今回の挑戦の点数の内訳 ・字幕：AIゆっくり霊夢の実況 ■ AIゆっくり霊夢 ・被弾やボム、自己ベストなどに合わせて、PC内で動く小さなAIがセリフを考えて喋ります ・ときどき成長の様子や東方風神録の話をします ・コメントには決まったセリフから選んで声で返事をします（コメント欄には書き込みません） ・AIが考えたセリフなので、たまに少しズレたことを言います ■ 学習のしくみ（強化学習／PPO） ・AIが見ているのは、ゲーム画面の映像と、自分やアイテムの位置だけ ・スコアを稼ぐ・生き残るとプラス、被弾するとマイナス。この合計を増やすように学習します ・挑戦の序盤で被弾するほど罰は重く、ボムは1回ごとに減点 ・ゲームオーバーのたびに数秒止まり、その回のプレイから学習して再開します ■ これからの予定（変わることがあります） 【AIゆっくり霊夢】 ・配信で喋ったセリフを見直して学習し直し、場面に合わない発言を減らしていきます ・雑談の話題を増やし、東方風神録の話も霊夢自身の言葉で話せるようにしていきます ・コメントへの返事も、決まったセリフではなくAIが考えて返せるようにしていきます 【学習】 ・ボムの使い方と序盤の被弾についてのルール変更の効果を確かめ、必要なら調整します ・1面の突破、そして2面以降へ ■ 配信について ・24時間続けて配信し、10時間ごとに新しい配信枠に切り替えています（アーカイブを残すため） ・難易度 Normal／霊夢A ・調整のため、ときどき一時停止画面になることがあります ■ ガイドラインについて この配信は東方Projectの二次創作（ファン活動）です。上海アリス幻樂団様とは関係ありません。 東方Projectの二次創作ガイドライン：https://touhou-project.news/guideline/ ガイドラインに従い、原作ゲームのエンディングは配信しません。 使用ゲーム：東方風神録 ～ Mountain of Faith.（Steam版） 音声：AquesTalk #東方風神録 #強化学習 #ゆっくり実況