Интерфейсы дополненной реальности для управления роботами - ROS Meetup 28 апреля 2024

Спикер - Оглезнев Никита Доклад рассказан на робототехнической конференции ROS Russian Meetup Чат ROS сообщества https://t.me/rosrussia Доклад посвящен проекту, выполненному в рамках Большой математической мастерской 2024: разработка прототипа AR-интерфейса для управления полуавтономным мобильным роботом. Разработка удобного интерфейса для управления мобильным роботом представляет собой нетривиальную задачу: необходимо одновременно поддерживать эргономичность и функциональность с точки зрения пользователя, скрывая при этом избыточную сложность и детали реализации. Таким критериям отлично удовлетворяют интерфейсы компьютерных стратегий: с помощью клавиатуры и мышки игрок может управлять движением юнитов, не задумываясь о его низкоуровневой реализации. Идея проекта состояла в интеграции интерфейса компьютерной игры для управления роботизированной колесной платформой с помощью технологий дополненной реальности. В формате proof-of-concept нашей команде удалось реализовать прототип такого робота. В рамках доклада будет представлен рассказ о технических особенностях решения: 1) как интегрировать AR с видеоданными; 2) как обеспечить частичную автономность робота при взаимодействии пользователя с интерфейсом с помощью RL.2