Анастасия Овчинникова - Сервис генерации саммари к вакансиям на основе LM,дообученной с помощью RLHF

Зачем нужны саммари вакансий, как мы создавали их раньше и как хотим создавать в идеале. Немного про генеративные модели. Что мы получили с помощью T5. Предпосылки RLHF и как это может нам помочь. Основные компоненты RLHF: model, reward model, trainer. Обучение reward model, генерация датасета с помощью t5 и человеческой разметки. Обучение RLHF Результаты A/B тестов и выкатка в prod Data Fest 2023: https://ods.ai/events/datafestonline2023 Трек "Instruct Models": https://ods.ai/tracks/df23-instruct-m... Наши соц.сети: Telegram: https://t.me/datafest Вконтакте: https://vk.com/datafest