Тактильное зрение роботов: новый подход к манипулированию инструментами

от

Система, использующая семантическое поле для различения кончика и корпуса карандаша, демонстрирует успешный захват как знакомых, так и незнакомых объектов, указывая на способность к обобщению и надежному определению точек захвата вне зависимости от предыдущего опыта.

Исследователи представили метод, позволяющий роботам надежно захватывать и использовать различные инструменты, опираясь на сочетание визуальной информации и тактильных ощущений.

Предвидение действий: как ИИ предугадывает взаимодействие с объектами

от

Новая модель STAformer++ предсказывает ограничивающие рамки объектов, вероятности связанных существительных/глаголов, оценки времени до контакта и уровни достоверности, динамически обучаясь предсказывать аффордансы существительных и глаголов [latex]p_{\text{aff}}(n\lvert\mathcal{V^{\prime}}) [/latex] и [latex]p_{\text{aff}}(v\lvert\mathcal{V^{\prime}}) [/latex] на основе пар «изображение-видео» для уточнения прогнозов и повышения их точности.

Новая архитектура STAformer позволяет искусственному интеллекту прогнозировать ближайшие действия человека с объектами, опираясь на понимание окружающей среды и визуальное внимание.