DeepEval для RAG: оценка точности и полноты поиска (Retrieval)

Оценка RAG начинается с оценки отдельных частей, и здесь я сосредоточусь на ретривере. Я рассматриваю теорию и математику, лежащие в основе точности и полноты, а затем расширяю их до контекстной точности и контекстной полноты. Затем мы реализуем метрики с помощью DeepEval, добавляем переранжирование в конвейер и изменяем параметры, чтобы увидеть, как они влияют на оценки. 🎥 Полный плейлист:    • Applied AI Engineering - LLM Systems in Pr...   🤝 Свяжитесь со мной в LinkedIn:   / vijay-sundaram   00:00 Вступление 02:10 Обзор оценки RAG 09:49 Полнота и точность @k 28:19 Контекстная полнота 35:04 Контекстная точность и переранжирование 47:35 Реализация DeepEval