【強化学習】何も知らないAIが東方風神録をクリアするまで｜AIゆっくり霊夢が見守る24時間LIVE #10

何も知らないAIに、東方風神録をゼロから学習させています。最初はでたらめにボタンを 押していたAIが、被弾とゲームオーバーを何千回も繰り返しながら、少しずつ弾幕を 避けられるようになっていく様子を24時間ライブで配信中。横では「AIゆっくり霊夢」が 実況しています。 ■ 見どころ ・1面ボスを削り切って、初めて2面へ進む日 ・パワーを集められるようになるか（今は面の前半をパワー0.00のまま戦っています） ・左下の隅から出てこられるか ■ 画面の見方 ・左：挑戦回数・累計学習時間・成長曲線・AIが今押しているボタン 　（数字は直近10秒で押していた割合、赤はボム発動） ・右下：報酬のしくみと、今回の挑戦の点数の内訳（スコア／生存／削り／パワー／被弾） ・字幕：AIゆっくり霊夢の実況 ■ 学習のしくみ（強化学習／PPO） ・AIが見ているのは、ゲームの中の数字だけです。画面の映像は見ていません。 　弾ひとつひとつの位置・速さ・当たり判定の大きさ、敵やアイテムの位置を、 　数字の列として受け取っています ・スコアを稼ぐ・生き残る・敵の体力を削るとプラス、被弾するとマイナス。 　この合計を増やすように学習します ・挑戦の序盤で被弾するほど罰は重く、ボムは1回ごとに減点 ・ゲームオーバーのたびに数秒止まり、その回のプレイから学習して再開します ■ AIゆっくり霊夢 ・被弾やボム、自己ベストなどに合わせて、PC内で動く小さなAIがセリフを考えて喋ります ・ときどき成長の様子や東方風神録の話をします ・AIが考えたセリフなので、たまに少しズレたことを言います ・立ち絵：そる様 Twitter   / remonntteumai   　　　　　　　 niconico http://www.nicovideo.jp/user/92502344 Pixiv https://www.pixiv.net/users/54516520 ■ コメントについて ・コメントでの指摘が、実際に学習のルール変更につながっています。 　「敵を倒す動機が薄いのでは」という指摘から、敵の体力を削ると点が入る仕組みを 　追加しました（2026年9月19日） ・気づいたことがあれば書いていってください。全部読んでいます ■ これからの予定（変わることがあります） 【学習】 ・敵を削る報酬を入れたところです。効果を確かめます ・次はパワーの扱い。面の前半をパワー0.00のまま戦っているのが、 　序盤の被弾とボス戦の火力不足の両方につながっています ・1面の突破、そして2面以降へ 【AIゆっくり霊夢】 ・返事できる話題を増やします（今は3件に1件、答えられずにいます） ・配信で喋ったセリフを見直して学習し直し、場面に合わない発言を減らしていきます ■ 配信について ・24時間続けて配信し、10時間ごとに新しい配信枠に切り替えています（アーカイブを残すため） ・難易度 Normal／霊夢A（誘導） ・調整のため、ときどき一時停止画面になることがあります ■ ガイドラインについて この配信は東方Projectの二次創作（ファン活動）です。上海アリス幻樂団様とは関係ありません。 東方Projectの二次創作ガイドライン：https://touhou-project.news/guideline/ ガイドラインに従い、原作ゲームのエンディングは配信しません。（自動的に画面を遷移させます） 使用ゲーム：東方風神録 ～ Mountain of Faith.（Steam版） 音声：AquesTalk #東方風神録 #強化学習 #ゆっくり実況