LLMが書く回帰テストは欠陥の挙動を期待値にできる
suwa-sh
0:00 / 0:00
LLMが書く回帰テストは欠陥の挙動を期待値にできる
185 просмотров · 12 дн. назад
suwa-sh
153 подписчика
185 просмотров · 12 дн. назад
📝 元記事: https://suwa-sh.github.io/zenn-conten...
🗂 章立て
00:00 LLMが書く回帰テストは欠陥の挙動を期待値にできる
00:25 よくあるやり方
00:49 作例は送料の関数
01:13 LLMは今の戻り値を正解に書く
01:32 採用されたあとに起きること
01:55 入口は通ったら採用
02:06 正解をどこから取るか
02:35 先行研究も同じ向き
02:59 正しいテストのほうが消える
03:26 テストは四種類に分かれる
03:51 通ったら採用で残るもの
04:14 LLMだけの問題ではない
04:37 なぜ起きるかの振り返り
04:56 研究ではこう確かめた
05:24 普段の開発では見分けにくい
05:40 固定は見つけるより多い
06:12 数字の読み方
06:44 取り戻したいテスト
06:53 採用の仕方を変える
07:15 落ちたテストの見方
07:38 仕様だけを渡して書かせる
08:03 別のLLMでは代わりにならない
08:28 今の出力を正解にしてよいとき
08:51 作例は仕様から正解を書く
09:16 まとめ
(音声: ElevenLabs / スライド・編集: 自作 HTML + HyperFrames)
━━━━━━━━━━━━━━━
💬 お仕事のご相談・お問い合わせ
https://suwa-sh.github.io/profile/#Co...
📺 チャンネル登録
https://www.youtube.com/@suwa-sh?sub_...
📚 記事で深掘り
Zenn: https://zenn.dev/suwash
note: https://note.com/suwash
🔗 プロフィール・その他リンク
https://suwa-sh.github.io/profile/