OpenAI Operator: подробный аудиообзор

Подробное техническое обсуждение в формате подкаста: OpenAI Operator и модель «компьютер-использующий агент» (CUA) (OpenAI, январь 2025 г.). Темы: 1. Агентность, ориентированная на зрение: как CUA обходит уязвимые DOM-деревья и работает непосредственно с пикселями области просмотра. 2. Песочница облачных контейнеров: временные контейнеры Chromium Linux, изолирующие ненадежные веб-страницы от локальных машин. 3. Перехват управления с участием человека: потоковая передача видео в реальном времени WebRTC и ручной перехват управления одним щелчком мыши для обеспечения конфиденциальности паролей и оформления заказа. 4. Моделирование угроз: атаки с непрямым внедрением подсказок и защита с помощью многомодального классификатора с 99% полнотой. 5. Анализ бенчмарков: разбор результатов 38,1% на OSWorld, 54-58,1% на WebArena и каскадного накопления ошибок в долгосрочных рабочих процессах. Аудиообзор создан на основе учебного пособия с помощью NotebookLM; визуальные элементы представляют собой рендеринг инфографики из учебного пособия, выполненный Кеном Бернсом.