Роботы учатся действовать в реальном мире: иерархическое управление для сложных задач

Предлагаемая схема Perceptive HTMPC обеспечивает замкнутый цикл восприятия и управления для последовательных задач мобильной манипуляции в полустатичных неструктурированных средах, используя данные о состоянии робота и карте окружения для обеспечения безопасного и реактивного поведения.

Новый подход к управлению мобильными роботами позволяет им надежно выполнять последовательные манипуляции с объектами в неструктурированных и динамично меняющихся условиях.

Осязание как ключ к ловкости: роботы учатся манипулировать инструментами

Несмотря на ограниченную информацию о силах и моментах на интерфейсе «человек-инструмент», люди способны выполнять сложные манипуляции с инструментами даже при визуальной окклюзии, полагаясь на когнитивные рассуждения и внутренние модели использования инструментов для вывода релевантных свойств объекта, таких как его положение и геометрия, несмотря на неоднозначность, возникающую из-за множественных точек контакта на наконечнике инструмента.

Новая работа демонстрирует, как объединение физического моделирования и тактильных ощущений позволяет роботам надежно выполнять сложные задачи с инструментами, даже при ограниченной видимости.

Искусство диалога: как сделать взаимодействие человека и ИИ эффективным

Новый подход к проектированию интерфейсов, вдохновленный успехом текстовых ИИ-агентов, может значительно улучшить совместную работу человека и искусственного интеллекта.

Тактильное зрение роботов: Новый сенсор объединяет зрение и осязание

Разработана технология, использующая MuxGel, материал для одновременного визуально-тактильного зондирования с пространственным мультиплексированием, позволяющая интегрировать его в существующие тактильные сенсоры, такие как GelSight Mini, путём простой замены гелевой подложки, и реконструировать как тактильные, так и визуальные изображения на основе полученных мультиплексированных данных.

Исследователи представили MuxGel — инновационный сенсор, позволяющий роботам одновременно воспринимать визуальную и тактильную информацию, значительно расширяя возможности манипулирования объектами.