Новый подход позволяет преобразовывать визуальные действия в точные инструкции для языковых моделей, значительно повышая эффективность анализа и понимания данных.
Исследователи представили LEXIS — инновационный метод реконструкции 3D взаимодействий человека и объектов, основанный на изучении скрытых закономерностей в пространстве взаимодействий.
![Метод DeVI, работающий в трехмерной физической среде с участием человека и объектов, генерирует физически правдоподобные взаимодействия, используя видео-диффузионную модель в качестве планировщика движений, учитывающего текстовые запросы, описывающие желаемое взаимодействие [latex] \implies [/latex] взаимодействие определяется текстом и реализуется в физически достоверной анимации.](https://arxiv.org/html/2604.20841v1/x1.png)
Новая методика позволяет научить роботов сложным манипуляциям с объектами, используя видеодиффузионные модели и физическое моделирование, обходясь без дорогостоящей 3D-съемки движений.
Представлен масштабный мультимодальный набор данных, призванный улучшить понимание и реализацию тактильных ощущений у роботов при выполнении сложных задач.
Новый подход к управлению в виртуальной реальности позволяет игрокам глубже погрузиться в спортивные состязания благодаря тактильным ощущениям и реалистичному взаимодействию.
Новый подход к отслеживанию здоровья помогает пожилым людям с хроническими заболеваниями лучше понимать и управлять своим состоянием.
Исследователи представили GRAFT — инновационную архитектуру, способную точно реконструировать сцены с участием человека, значительно улучшая качество и скорость работы.
![Байесовская модель восприятия двух тактильных стимулов демонстрирует, как априорные ожидания, определяемые средним значением [latex]\mu_t[/latex] и неопределенностью [latex]\sigma_t[/latex], комбинируются с функцией правдоподобия, центрированной на измеренном стимуле [latex]s_t^<i>[/latex], формируя апостериорное распределение [latex]p_{\text{post}}(s_t|s_t^</i>)[/latex], которое затем эволюционирует во времени с дисперсией [latex]\sigma_p^2[/latex] и используется для сравнения с последующим стимулом, определяя вероятность восприятия стимулов как равных в зависимости от разницы между ожидаемым и фактическим стимулом относительно неопределенности [latex]\sigma_{t+\delta t}[/latex].](https://arxiv.org/html/2604.19662v1/x2.png)
Новая модель, основанная на байесовском выводе, объясняет, почему мы иногда ошибаемся в определении последовательности тактильных ощущений.
В новой работе представлена система, позволяющая роботам самостоятельно изучать окружающую среду и создавать структурированную карту памяти для более эффективной навигации.
![На основе композиции из четырех изображений, охватывающих поле зрения в [latex]90^{\circ}[/latex], сформирована панорама в [latex]360^{\circ}[/latex], демонстрирующая расширенный обзор внешней среды.](https://arxiv.org/html/2604.19192v1/img/outdoor.jpeg)
Новая система позволяет неигровым персонажам (NPC) реагировать на окружающую среду, делая взаимодействие в играх более реалистичным и захватывающим.