ARPEGE: набор данных для оценки акустики и геометрии помещений по звуку

Для проверки алгоритмов, которые восстанавливают стены и параметры комнаты по отражениям, недостаточно знать только время реверберации. ARPEGE связывает многоканальные импульсные характеристики с геометрией отражателей, источников и приёмников. Особенно полезны неидеальные результаты переноса: реалистичная направленность помогает, но одна из комнат остаётся серьёзным отказом.

Метод. Записаны 248 сферических импульсных характеристик в шести пустых помещениях при 44 размещениях устройств. Используются Eigenmike на 32 и 64 канала, Genelec 8020 и восемь семисекундных экспоненциальных свипов 50 Гц–20 кГц, 48 кГц. Меняются расстояние и ориентация громкоговорителя; дополнительно доступны около 12 минут настоящей французской и английской речи и 28 серий по 20 хлопков. Геометрия измеряется дальномером с ориентировочной ошибкой 5 см, ориентация массивов восстанавливается по прямому пути. Код повторного моделирования учитывает измеренную направленность, но поглощение поверхностей пока неизвестно.

Результаты. На 40 близких фронтальных записях 32-канального массива связка Real2Sim и физической локализации находит 97,3% образных источников первого порядка против 57,6% без предварительного преобразования; средние ошибки найденных целей 9 см по расстоянию и 4,67° по углу. Для четвёртого порядка полнота падает до 37,3%. При слепой оценке по трёхсекундной речи средняя ошибка RT60 составляет 252 мс; это существенно хуже 116 мс, сообщённых ранее на другом наборе. Новый набор выявляет разрыв переноса, а не просто подтверждает старые показатели.

Ограничения. Шесть преимущественно прямоугольных пустых комнат площадью 11,5–42 м² не представляют меблированные и движущиеся сцены. Часть демонстраций использует лишь близкий фронтальный источник, то есть более удобный случай. Успех локализации определяется допуском до 1 м по радиусу и 20° по направлению; сантиметровые ошибки усредняются только по успешно найденным источникам. При оценке параметров разнос микрофонов 8,4 см не совпадает с обучающими 22,5 см. Низкочастотные двухсклонные спады делают RT60 неустойчивым; их исключают из итогового сравнения.

Фишка из статьи. Таблица 3 сравнивает модели, обученные с ненаправленным или реалистично направленным источником. Ниже абсолютные ошибки объёма при объединении трёх позиций; эталон дан для масштаба задачи.

Как это читать: правильная направленность резко помогает в трёх комнатах, но не решает комнату 1, где ошибка превышает сам объём втрое. При этом RT60 там не аномально плох: геометрический отказ нельзя объяснить одной длинной реверберацией. Это полезный контроль для цифрового двойника и подготовки данных улучшения речи: совпадение времени затухания ещё не означает совпадение пространственной модели.

Источник. Оригинальное название: ARPEGE: Dataset and Methods to Estimate Acoustic and Geometric Parameters of Rooms from Sound. arXiv:2610.41543; полный текст PDF.