Семинар RI: Джитендра Малик — Обучение роботов с опорой на принципы детского развития

Джитендра Малик Профессор кафедры электротехники и информатики им. Артура Дж. Чика / Вице-президент и выдающийся ученый Калифорнийский университет в Беркли / Amazon 13 февраля 2026 г. https://www.ri.cmu.edu/event/robot-le... Обучение роботов с учетом особенностей детского развития Аннотация: Для повсеместного распространения интеллектуальных роботов необходимо с достаточной надежностью решать задачи передвижения, навигации и манипуляции в самых разных условиях. В области передвижения мы уже имеем демонстрации ходьбы человекоподобных роботов в различных сложных условиях. В области навигации мы поставили перед собой задачу «Найти что угодно» — робот, войдя в недавно арендованное жилье через Airbnb, должен уметь находить такие объекты, как телевизоры или комнатные растения. Самые большие проблемы в современной робототехнике связаны с манипуляцией, особенно с ловкими манипуляциями с помощью многопальцевых рук. Недавние достижения в этой области обусловлены развитием методов обучения, однако их сдерживает недостаток «больших данных» в масштабах, доступных в области языка и зрения. Я утверждаю, что этот дефицит можно обойти, вдохновившись тем, как люди приобретают двигательные навыки в детстве. Для ловкого манипулирования ключевым является мультимодальное восприятие – зрение, осязание и проприоцепция. На мой взгляд, визуальная имитация должна основываться на 3D/4D реконструкции – тогда физический симулятор предоставит предварительно обученную модель мира. Основные технологии для реконструкции человеческого тела, рук и объектов уже существуют в виде таких систем, как HMR, HaMeR и SAM 3D. Визуальная имитация, хотя и необходима, недостаточна, поскольку политика должна учитывать и контактные силы. Обучение с подкреплением в симуляции и преобразование симуляции в реальность стали для нас основными технологиями, чему способствовали несколько технических инноваций. Я наметю перспективные направления для будущей работы. Биография: Джитендра Малик – профессор кафедры электротехники и информатики имени Артура Дж. Чика в Калифорнийском университете в Беркли, а также вице-президент и выдающийся ученый в Amazon. Его группа проводила исследования по множеству различных тем в области компьютерного зрения, компьютерной графики, машинного обучения и робототехники, в результате чего были разработаны такие концепции, как анизотропная диффузия, визуализация с высоким динамическим диапазоном, нормализованные разрезы, R-CNN и быстрая адаптация моторики. Его публикации были отмечены двенадцатью наградами за лучшие статьи, включая шесть наград за проверенную временем эффективность – премию Лонге-Хиггинса за статьи, опубликованные на CVPR (трижды) и премию Гельмгольца за статьи, опубликованные на ICCV (трижды). Он был научным руководителем более 80 аспирантов и постдокторантов. Джитендра получил премию Аллена Ньюэлла ACM/AAAI 2016 года, премию IJCAI за выдающиеся достижения в исследованиях в области ИИ 2018 года и премию IEEE Computer Society’s Computer Pioneer Award 2019 года за «ведущую роль в развитии компьютерного зрения как процветающей дисциплины благодаря новаторским исследованиям, лидерству и наставничеству». Он является членом Национальной академии наук США, Национальной инженерной академии и членом Американской академии искусств и наук.