Дрон-рейсинг чемпионского уровня с использованием глубокого обучения с подкреплением (Nature, 2023)

Гонки дронов с видом от первого лица (FPV) — это телевизионный вид спорта, в котором профессиональные участники управляют высокоскоростными летательными аппаратами на трехмерной трассе. Каждый пилот видит окружающую среду с точки зрения своего дрона посредством видеопотоковой передачи с бортовой камеры. Достичь уровня профессиональных пилотов с помощью автономного дрона — сложная задача, поскольку робот должен летать на пределе своих физических возможностей, оценивая свою скорость и местоположение на трассе исключительно с помощью бортовых датчиков. Здесь мы представляем Swift, автономную систему, которая может участвовать в гонках на физических транспортных средствах на уровне чемпионов мира среди людей. Система сочетает глубокое обучение с подкреплением в симуляции с данными, собранными в физическом мире. Swift соревновался с тремя чемпионами мира среди людей, включая чемпионов двух международных лиг, в реальных гонках один на один. Swift выиграл несколько гонок у каждого из чемпионов и продемонстрировал самое быстрое зафиксированное время гонки. Эта работа представляет собой важную веху для мобильной робототехники и машинного интеллекта, которая может вдохновить на внедрение гибридных решений на основе обучения в других физических системах. Ссылка: Элиа Кауфманн, Леонард Бауэрсфельд, Антонио Локерчио, Маттиас Мюллер, Владлен Колтун, Давиде Скарамуцца Гонки дронов чемпионского уровня с использованием глубокого обучения с подкреплением. Nature, 30 августа 2023 г. DOI: 10.1038/s41586-023-06419-4 PDF: https://www.nature.com/articles/s4158... Чтобы узнать больше о наших работах в области управления полетами дронов и машинного обучения, посетите нашу веб-страницу: Гонки дронов: https://rpg.ifi.uzh.ch/research_drone... Глубинное обучение: https://rpg.ifi.uzh.ch/research_learn... Гибкий полет: https://rpg.ifi.uzh.ch/aggressive_fli... Публикации лаборатории: https://rpg.ifi.uzh.ch/publications.html Принадлежность: Элиа Кауфманн, Леонард Бауэрсфельд, Антонио Локерсио и Давиде Скарамуцца работает в группе робототехники и восприятия Цюрихского университета, Швейцария: https://rpg.ifi.uzh.ch/ Маттиас Мюллер и Владлен Колтун работают в Intel Labs.