Руководство по внедрению производственного ИИ: развертывание агентов корпоративного уровня — Санд...

Один розничный банк потратил 85 000 фунтов стерлингов за шесть месяцев на разработку прототипа чат-бота, который так и не был запущен в производство. Никто не мог объяснить причины сбоев. Когда к проекту подключилась команда Сандипана Бхаумика, они выбрали модель на седьмой неделе восьминедельного проекта — первые шесть недель были посвящены сбору данных для оценки, созданию инфраструктуры трассировки и разработке конвейера измерений. Через шесть недель после запуска, когда банк обновил свою политику процентных ставок, и удовлетворенность клиентов упала, система трассировки выявила причину: новый документ с политикой не был повторно внедрен, и оператор выдавал устаревшие ответы. В докладе рассматриваются пять основных принципов, которые он выработал на основе этого и подобных проектов: оценка (определение успеха численно до внесения изменений в код), наблюдаемость (отслеживание каждого решения оператора — этого требуют европейские регуляторы), основа данных (операторы не прощают некорректные данные так, как это делают люди), шаблоны оркестровки многоагентной системы и управление (47 случаев утечки персональных данных были выявлены в ходе тестирования до запуска). Набор данных для оценки представляет собой живую систему, а не фиксированный эталон. План действий в случае инцидентов в производственной среде объединяет все пять принципов. Информация о спикере:   / sandipanbhaumik