Пространственное аудио Статистика направлений Фазовые признаки
arXiv eess.SP

Статистика направлений в обработке сигналов: геометрия, модели и приложения

ArXiv:2611.04595

Обзор связывает статистические модели направлений с задачами обработки сигналов, где абсолютный масштаб, знак или общая фаза не несут нужной информации. Для аудио особенно интересен пример кластеризации многоканальных спектральных коэффициентов: корректный выбор пространства признаков влияет даже на оценку числа источников. Это не новый алгоритм улучшения речи, а систематизация геометрии с показательным пространственным экспериментом.

Метод. Авторы рассматривают окружность, тор, сферу и проективные пространства, а также распределения Watson, Bingham и angular central Gaussian. У четырёх микрофонов комплексный вектор STFT можно нормировать по энергии; если общая фаза несущественна, естественным пространством становится комплексное проективное CP³. В нём сохраняются относительные амплитуды и фазы. Альтернативный UMVM использует только фазовые различия на торе. Эти представления сравниваются с комплексной гауссовой смесью по ненормированным спектрам.

Результаты. Аудиопример моделирует салон автомобиля с пятью посадочными местами, тремя говорящими и четырьмя микрофонами. На 45 секундах обучаются смеси с числом компонент от одной до пяти, проверка идёт на других 30 секундах. Выбраны шесть фиксированных частот от 250 до 3500 Гц. Направленные модели достигают максимума нормированной взаимной информации при трёх компонентах, совпадающих с тремя занятыми местами. Гауссова смесь предпочитает четыре; при трёх компонентах она не выделяет одно занятое место и расходует две компоненты на другое.

Ограничения. Это одна смоделированная сцена с сильно преобладающей одиночной активностью: 90% кадров содержат одного говорящего, 8% двух и 2% трёх. Частотные оценки требуют согласования перестановок компонент. Не показаны восстановленные звуковые дорожки, SI-SDR, DER или выигрыш в распознавании. Пространственные контуры служат визуализацией, а не откалиброванными вероятностями положения. Результат не доказывает превосходства одной геометрии для любых помещений и источников. Использованы фиксированные частоты STFT, не адаптивный частотно-временной базис.

Фишка из статьи. Рисунок 12 показывает разные причины ошибки в числе источников. Ниже качественная сводка рисунка, не новая численная оценка: истинно заняты места 1, 2 и 3.

ПредставлениеСохраняемые сведенияЧисло компонент в максимуме оценкиЧто происходит при трёх компонентах
Комплексная гауссова смесьАбсолютная энергия и комплексный спектр4Место 2 не выделено; две компоненты у места 3
Проективные направленные моделиОтносительные амплитуды и фазы3Разделены места 1, 2 и 3
Фазовая модель UMVMОтносительные фазы3Разделены места 1, 2 и 3

Как это читать: гауссова смесь может тратить компоненту на изменение энергии одного источника, а не на новый источник. Устранение несущественного масштаба делает число компонент более осмысленным в данной сцене. При этом успешен и фазовый тор, и проективное пространство с амплитудами: опыт поддерживает согласование признаков с инвариантностями, а не лозунг «больше фазовой информации всегда лучше».

Источник. Оригинальное название: Directional Statistics in Signal Processing: A Geometry Driven Overview of Models, Learning, and Applications. arXiv:2611.04595; полный текст PDF.

Оригинальная статья на arXiv