Как создать лучшие оценки для ИИ с помощью Claude Code за 5 шагов | Шрея и Хамел

📌 Скопируйте систему ИИ, которую я использую для ведения бизнеса с оборотом более 1 миллиона долларов: https://www.behindthecraft.com 🤝 Подпишитесь на мою практическую рассылку об ИИ, которую читают более 150 000 профессионалов: https://creatoreconomy.so Шрея и Хамель преподают курс по оценке ИИ, являющийся отраслевым стандартом, который прошли более 4500 студентов из OpenAI, Google и других компаний. В нашем интервью я попросил их дать обратную связь по результатам оценки ИИ, которую я разработал для своих навыков, и продемонстрировать, как любой может проводить оценки с помощью ChatGPT/Claude и их бесплатного навыка оценки. Не пропустите это актуальное руководство по оценке от настоящих экспертов. 🙂 P.S. Я попросил Шрею и Хамеля предоставить моей аудитории скидку 25% на следующий поток их курса по оценке ИИ. У него 4,7 звезды и 900 отзывов, что почти неслыханно на Maven. Зарегистрируйтесь по ссылке: https://maven.com/parlance-labs/evals... Мы обсудили: (00:00) Почему оценки ИИ теперь совершенно другие с последними моделями (02:30) Демонстрация: Аудит оценок, которые я создал для своих навыков ИИ (05:14) Оценки «сверху вниз» против оценок «снизу вверх» и почему ИИ плохо справляется со последними (08:16) Запуск агентов ИИ для оценки каждого критерия оценки (14:32) Демонстрация: Использование навыка ИИ Shreyas для запуска оценок в Claude (23:46) Как просматривать выходные метки для выявления ошибок (34:37) Как превратить ошибки в многоразовые оценки (43:19) Где по-прежнему требуется человеческое суждение Ресурсы Упомянутые ресурсы: Бесплатные навыки оценки от Шреи: https://github.com/ai-evals-course/ev... Работают ли автоматизированные оценки?: https://parlance-labs.com/blog/posts/... Спасибо нашим спонсорам: Wispr Flow — в 4 раза быстрее, чем ввод текста голосом — https://ref.wisprflow.ai/peteryang 📌 Основные выводы: https://creatoreconomy.so/p/how-to-bu... Где найти Шрею и Хамеля: Шрея: https://www.sh-reya.com/ Хамель: https://hamel.dev/ Подпишитесь на этот канал — скоро появятся новые интервью!