Наука

Визуальное программирование и искусственный интеллект: где кроется разрыв?

от

В рамках исследования взаимодействия агентов со средой Scratch, оценивался рабочий процесс отладки посредством задачи исправления некорректного управления веслом в Pong, где агенты могли использовать как примитивные операции через графический интерфейс (перетаскивание), так и композитные, посредством высокоуровневых API (удаление блоков), а проверка функциональной корректности осуществлялась с использованием Scratch VM.

Новое исследование демонстрирует, что даже для простых задач визуального программирования, таких как создание игр в Scratch, агентам с искусственным интеллектом сложно перевести логические рассуждения в реальные действия.

Голосовой помощник в смешанной реальности: новый уровень взаимодействия

от

Система Reality Copilot обрабатывает голосовой ввод пользователя в смешанной реальности, используя комбинацию коммерческих и открытых языковых моделей: первые отвечают за обработку речи, вторые - за анализ изображений и 3D-моделей, формируя как голосовые ответы, так и системные действия, которые, в свою очередь, обновляют контекст взаимодействия.

Исследователи представляют систему, объединяющую возможности больших мультимодальных моделей и носимых устройств для создания интуитивно понятного голосового управления в смешанной реальности.

Где Человек незаменим: Направляя Искусственный Интеллект в Творческом Кодировании

от

В ходе исследования распределения ролей при совместном кодировании, эксперименты по исключению этапа выбора кода и варьированию ролей агентов (инструктор/селектор) продемонстрировали влияние этих факторов на валидацию результатов, выявляя ключевые аспекты эффективного сотрудничества между человеком и искусственным интеллектом.

Новое исследование показывает, что люди превосходят ИИ в задании общего направления при итеративной разработке кода, подчеркивая важность продуманного распределения ролей в тандеме человек-машина.

Виртуальная реальность: как способ взаимодействия влияет на качество выполнения задач

от

Виртуальная кухня, созданная посредством моделирования, служит платформой для проведения экспериментов, позволяя исследовать взаимодействие и поведение в контролируемой цифровой среде.

Новое исследование показывает, что выбор между контроллерами и перчатками для виртуальной реальности существенно влияет на удобство и эффективность выполнения повседневных задач.