Современные достижения в области искусственного интеллекта открывают новые горизонты для развития робототехники. Однако перенести успехи data-driven моделей, таких как языковые и мультимодальные модели, в физический мир — непростая задача.

В докладе рассматриваются ключевые вызовы создания умных роботов: нехватка качественных данных, разрыв между симуляцией и реальностью, а также интеграция восприятия, мышления и действия. Мы обсудим, на что способны современные подходы, и разберём архитектуры актуальных SOTA-методов в контексте embodied AI. Также будут приведены примеры, где когнитивные модели помогают роботам принимать осмысленные решения в реальной среде.