Отслеживание направления прихода речи с конформной оценкой неопределённости
Краткая направленная помеха может заставить локализатор перескочить с говорящего на шум. В этой работе размер и разброс конформного набора направлений регулируют доверие к новому предсказанию: при неопределённости трекер сильнее продолжает прежнюю траекторию. Это простая проверяемая идея, но гарантия калибровки в динамической сцене слабее формального обещания для независимых данных.
Метод. U-Net получает действительные и мнимые части мгновенных относительных передаточных функций пяти микрофонов. Направление классифицируется по 32 углам с шагом 5°, крайние направления вдоль массива исключены. На статических сценах калибруется порог −log p правильного класса при α=0,1. В трекере гауссова матрица переходов переносит распределение прошлого кадра, а экспонента от размера, размаха и нерегулярности конформного набора определяет вес новой нейросетевой оценки.
Результаты. Для обучения моделируются 80 комнат, для калибровки 20, для движущегося источника 50. В динамическом тесте речевой источник движется по дуге радиуса 1,5 м; помехи 300–500 мс возникают из ранее посещённых направлений при локальном SNR 0 дБ. При RT60=0,5 с средняя абсолютная угловая ошибка после сглаживания 9,29° против 12,79° без него, при RT60=0,8 с 8,38° против 10,92°. Это сравнение с собственным U-Net без трекера, не с широким набором современных систем.
Ограничения. Обучение и калибровка статические, тест динамический: обменность признаётся лишь приблизительной, поэтому номинальные 90% покрытия нельзя принимать как доказанную гарантию на движущемся источнике. Реальная доля покрытия, размеры наборов и их надёжность при шуме не приведены. Нет абляции против обычного сглаживания, управляемого энтропией softmax, и нет реальных комнат. Временная инерция может скрывать быстрый манёвр. Углы вне заданной сетки и одновременные говорящие не исследованы.
Фишка из статьи. В таблице 1 видна цена сглаживания: там, где исходная оценка уже хороша, история может мешать. Указана MAE в градусах до и после одного и того же конформно-управляемого трекера.
| RT60, с | Без помехи: до → после | С импульсной помехой: до → после |
|---|---|---|
| 0,2 | 5,81 → 6,36 | 17,24 → 14,18 |
| 0,5 | 6,34 → 5,63 | 12,79 → 9,29 |
| 0,8 | 7,35 → 6,67 | 10,92 → 8,38 |
Как это читать: устойчивость к выбросам не равна лучшему разрешению: в самом чистом случае ошибка растёт на 0,55°. Для голосового интерфейса нужно проверять не только среднюю угловую ошибку, но и задержку захвата нового направления. Конформный слой здесь даёт сигнал для управления доверием; его пользу нельзя отделить от самой временной модели без дополнительного контрольного опыта.
Источник. Оригинальное название: Conformal Prediction-Aware DOA Tracking. arXiv:2610.39566; полный текст PDF.