Игры как полигон для разума: новые горизонты когнитивных исследований
Коммерческие видеоигры предлагают уникальную и экологически валидную среду для изучения когнитивных процессов и взаимодействия человека с компьютером, открывая новые возможности для научных исследований.
![Структурированный подход к проектированию задач по разборке и многомодальная оценка показали, что использование визуальной информации в сочетании с тактильным представлением поля сил [latex]TacFF[/latex] значительно повышает успешность выполнения операций, особенно в условиях высокой контактной сложности и работы с деформируемыми объектами, что подчеркивает важность структурированного кодирования информации о силах при решении подобных задач.](https://arxiv.org/html/2603.08560v1/x1.png)

![В основе разработки робототехнических систем лежит бионика, где принципы биологической сенсорики и проприоцепции - ощущение собственного тела в пространстве - находят отражение в механической реализации баланса между тросом и балкой, а передача натяжения троса моделируется посредством трения в капкане [latex]F = T \mu \theta [/latex], что позволяет создавать системы, имитирующие естественные механизмы контроля и адаптации.](https://arxiv.org/html/2603.07426v1/Figures/FIG1_R1.png)

![Предложенная схема обучения объединяет акустическую и геометрическую ветви нейронной сети через общее латентное пространство [latex]\mathcal{Z}[/latex] и основу [latex]f\_{\theta}[/latex], используя как синтез B-моды ([latex]\mathcal{L}\_{photo}[/latex]), так и истинную заполненность формы ([latex]\mathcal{L}\_{occ}[/latex]) для моделирования акустической тени, при этом на этапе инференса оптимизируется латентный код [latex]\mathbf{z}^{\<i>}[/latex] по фрагментированным B-модным наблюдениям ([latex]\mathcal{L}\_{tto}[/latex]) для восстановления полной 3D-геометрии [latex]o(\mathbf{x}\mid\mathbf{z}^{\</i>})[/latex].](https://arxiv.org/html/2603.08279v1/MICCAI2026-Latex-Template-4/gfx/oscar_main.001.png)

