Звук из будущего: реалистичное пространственное аудио на основе 3D-сцен
![Разработанная схема NVAS, основанная на понимании физики звука, моделирует трёхмерное акустическое пространство с использованием [latex]3DGS[/latex] и оценки глубины по многовидовым изображениям, восстанавливая геометрию и размеры помещения, а также обогащает акустическое моделирование информацией об объектах, их расположении и материалах, учитывая эффекты поглощения и отражения, что позволяет создавать реалистичную и физически согласованную бинауральную аудиозапись за счет объединения геометрических и семантических признаков в единое физически обоснованное представление.](https://arxiv.org/html/2601.19712v1/x2.png)
Новый подход объединяет визуальное понимание сцен, физические модели и языковые описания для создания невероятно правдоподобного звука, меняющегося в зависимости от положения слушателя.







