Руководство по внедрению производственного ИИ: развертывание агентов корпоративного уровня — Санд...

Один розничный банк потратил 85 000 фунтов стерлингов за шесть месяцев на разработку прототипа чат-бота, который так и не был запущен в производство. Никто не мог объяснить причины сбоев. Когда к проекту подключилась команда Сандипана Бхаумика, они выбрали модель на седьмой неделе восьминедельного проекта — первые шесть недель были посвящены сбору данных для оценки, созданию инфраструктуры отслеживания и разработке конвейера измерений. Через шесть недель после запуска, когда банк обновил свою политику процентных ставок, и удовлетворенность клиентов упала, система отслеживания выявила причину: новый документ с политикой не был повторно внедрен, и оператор выдавал устаревшие ответы. В докладе рассматриваются пять основных принципов, которые он выработал на основе этого и подобных проектов: оценка (определение успеха численно до внесения изменений в код), наблюдаемость (отслеживание каждого решения оператора — этого требуют европейские регуляторы), основа данных (операторы не прощают некорректные данные так, как это делают люди), шаблоны оркестровки многоагентной системы и управление (47 случаев утечки персональных данных были выявлены в ходе тестирования до запуска). Набор данных для оценки представляет собой живую систему, а не фиксированный эталон. План действий в случае инцидентов в производственной среде объединяет все пять принципов. Информация о докладчике:   / sandipanbhaumik   --- Смотрите транскрипцию, краткое содержание, временные метки и дополнительные материалы на официальной странице доклада на AIE: https://ai.engineer/talks/ObTPqBGsEbA... Присоединяйтесь к нашим предстоящим конференциям для инженеров в области ИИ (см. целевую страницу https://ai.engineer): AIEi Shanghai, 5–6 ноября — первая конференция для встреч с ведущими китайскими лабораториями и инженерами AIE CODE в Сан-Франциско, 10–12 ноября — возвращается ведущая конференция по программированию в области ИИ AIEi Sydney, 7–8 декабря — первая конференция AIEi, проводимая параллельно с NeurIPS 2026 в Сиднее ---