Перейти к содержимому

Адаптация RAGAS для оценки RAG / Владимир Ловцов

Cloud․ru

0:00 / 0:00

Адаптация RAGAS для оценки RAG / Владимир Ловцов

612 просмотров · 1 год назад
Cloud․ru
4,23 тыс. подписчиков
612 просмотров · 1 год назад
☁️ Попробуй наше облако бесплатно https://clck.ru/3KCyyw 📍Делимся экспертизой в TG-канале, подпишись: https://t.me/+Tnx59iQxQ0ZmNThi 📍 Хабр Cloud․ru, подпишись: https://clck.ru/3A9zCC Спикер: Владимир Ловцов,старший Data Science инженер Cloud.ru Спикеры поделились практическим опытом тестирования RAG-компонентов AI-ассистента Клаудия с использованием библиотеки RAGAS. В докладе были рассмотрены: подходы к генерации тестовых данных, ключевые метрики оценки качества (Recall, Precision, Faithfulness), а также выявленные ограничения инструмента — проблемы с русскоязычными данными, зацикливание генерации и неявные зависимости.