Пространственный звук в 6DoF XR: правдоподобие не гарантирует точности восприятия расстояния

Звук в виртуальном помещении может казаться настоящим и всё же систематически менять пространственные решения слушателя. На одной 6DoF XR-системе авторы проверяют и распознавание виртуальности, и определение расстояния до источника при ходьбе. Разделение этих двух испытаний важно для акустических симуляторов: убедительное впечатление ещё не подтверждает поведенческую эквивалентность реальной комнате.

Метод. 45 участников проходят оба опыта. Unreal Engine воспроизводит визуальную копию лаборатории, liveRAZR рассчитывает ранние отражения методом мнимых источников и поздний хвост через FDN, используется бинауральный вывод с неиндивидуальными HRTF. Симуляция упрощает геометрию до прямоугольной комнаты, но подстраивается по измеренным временам реверберации и отношению прямой и отражённой энергии; отражённую часть дополнительно усиливают на 4 dB. В задаче расстояния независимо меняют настоящие или виртуальные звук и изображение, а человек выбирает один из пяти источников по глубине.

Результаты. В опыте правдоподобия средняя чувствительность различения d′ равна 0,41 при настоящем визуальном окружении и 0,16 в VR, различие p = 0,028. Меньше d′ означает, что виртуальный звук труднее отличить. Оба условия проходят более мягкий критерий правдоподобия, но строгая односторонняя проверка с порогом d′ = 0,1777 не подтверждает прохождение ни одного. Авторы дополнительно интерпретируют байесовский анализ VR, однако отсутствие отличия от порога не равнозначно доказанному запасу ниже него. В отдельной поведенческой задаче виртуализация снижает точность примерно с 95 до 89–90%.

Ограничения. Одна лаборатория, конкретные наушники, симулятор и преимущественно молодые люди с нормальным слухом не задают универсальную границу качества XR. Ходьба ограничена прямой линией, набор ответов дискретный; ошибки крайних источников имеют эффект границы. Неиндивидуальная HRTF, упрощённая геометрия и остаточные различия DRR могут влиять совместно, причинный вклад каждого не выделен. Работа описывает аудио 48 кГц и буфер 512 отсчётов, но это не измеренная полная задержка от движения до звука. Перенос на шумные сцены и несколько одновременных источников не проверен.

Фишка из статьи. Рисунки 11–14 и сопровождающий текст показывают разные аспекты одной задачи. Ниже оценённые моделью средние по положениям источников. Ошибка выражена разностью номеров выбранного и настоящего громкоговорителя, не метрами.

Как это читать: виртуализация изображения ухудшает точность без подтверждённого направленного смещения, а виртуальный звук сдвигает ответы к более близкому источнику. Эффекты не складываются линейно: полная VR не хуже суммы двух отдельных искажений. Для инженерной приёмки недостаточно вопроса «звучит ли правдоподобно»; нужна задача, ради которой среда создаётся, с собственными измерениями точности, смещения и усилия.

Источник. Оригинальное название: Auditory and Visual Virtualization in 6DoF XR: Effects on Plausibility and Dynamic Auditory Distance Perception. arXiv:2611.07612; полный текст PDF.