Естественное управление гуманоидами: новый подход к отслеживанию движений

Система SONIC обеспечивает универсальное отслеживание движений гуманоидов посредством единой политики управления, способной обрабатывать разнообразные команды и модальности, преобразуя команды для робота, человека и гибридных движений в универсальный токен, управляющий контролем и декодированием движений робота, что позволяет реализовать широкий спектр приложений, включая управление с геймпада, телеуправление в виртуальной реальности, телеуправление всем телом, телеуправление по видео и многомодальное управление из текста и музыки.

Исследователи разработали систему SONIC, использующую масштабное отслеживание движений для создания универсальной политики управления гуманоидными роботами, обеспечивающей более плавные и естественные движения.

Живые объекты в видео: новый подход к реконструкции и моделированию деформаций

Настоящее исследование демонстрирует превосходство предложенного метода NeuSpring в задачах реконструкции и ресимуляции, а также прогнозирования динамики физических систем по сравнению с PhysTwin, при этом визуализируется аппроксимированное материальное представление пружин, основанное на оценке их жёсткости.

Исследователи представили NeuSpring – систему, способную реалистично восстанавливать и симулировать поведение деформируемых объектов, запечатленных на видео, преодолевая ограничения традиционных методов.