Перейти к содержимому

LLMが書く回帰テストは欠陥の挙動を期待値にできる

suwa-sh

0:00 / 0:00

LLMが書く回帰テストは欠陥の挙動を期待値にできる

185 просмотров · 12 дн. назад
suwa-sh
153 подписчика
185 просмотров · 12 дн. назад
📝 元記事: https://suwa-sh.github.io/zenn-conten... 🗂 章立て 00:00 LLMが書く回帰テストは欠陥の挙動を期待値にできる 00:25 よくあるやり方 00:49 作例は送料の関数 01:13 LLMは今の戻り値を正解に書く 01:32 採用されたあとに起きること 01:55 入口は通ったら採用 02:06 正解をどこから取るか 02:35 先行研究も同じ向き 02:59 正しいテストのほうが消える 03:26 テストは四種類に分かれる 03:51 通ったら採用で残るもの 04:14 LLMだけの問題ではない 04:37 なぜ起きるかの振り返り 04:56 研究ではこう確かめた 05:24 普段の開発では見分けにくい 05:40 固定は見つけるより多い 06:12 数字の読み方 06:44 取り戻したいテスト 06:53 採用の仕方を変える 07:15 落ちたテストの見方 07:38 仕様だけを渡して書かせる 08:03 別のLLMでは代わりにならない 08:28 今の出力を正解にしてよいとき 08:51 作例は仕様から正解を書く 09:16 まとめ (音声: ElevenLabs / スライド・編集: 自作 HTML + HyperFrames) ━━━━━━━━━━━━━━━ 💬 お仕事のご相談・お問い合わせ https://suwa-sh.github.io/profile/#Co... 📺 チャンネル登録 https://www.youtube.com/@suwa-sh?sub_... 📚 記事で深掘り Zenn: https://zenn.dev/suwash note: https://note.com/suwash 🔗 プロフィール・その他リンク https://suwa-sh.github.io/profile/