Дополненная реальность с объяснениями: как сделать взаимодействие с AR понятным и персонализированным

Новая разработка позволяет дополненной реальности адаптироваться к пользователю, предоставляя ясные и понятные объяснения для повышения удобства и эффективности.

Визуальная навигация будущего: как нейросети учатся ориентироваться в пространстве

Система навигации ImagineNav++ функционирует итеративно, захватывая панорамные изображения окружения и, используя обученный модуль Where2Imagine в сочетании с моделью синтеза новых видов, генерируя воображаемые сцены, после чего, опираясь на структурированные запросы и интегрируя историческую память с прогнозируемыми наблюдениями, определяет оптимальный путь посредством политики PointNav, пока не будет достигнута целевая точка.

Новый подход позволяет моделям, обученным понимать язык и видеть, самостоятельно находить путь в сложных виртуальных средах, используя лишь текстовые инструкции.