RASE 2026: проверка улучшения речи, восстановленной радиолокатором через стекло

RASE переносит улучшение речи в условия, где вход получен не микрофоном, а из колебаний отражающей поверхности за стеклом. Здесь искажения зависят от механики поверхности и геометрии измерения, а не сводятся к аддитивному шуму. Ценность статьи в общем протоколе и первых результатах соревнования, включая заметно более трудный сценарий вторичной вибрации.

Метод. FMCW-радиолокатор TI AWR2243BOOST на 77 ГГц измеряет фазовые изменения отражения при частоте повторения chirp 8 кГц. Из них заранее получают звуковые WAV-сигналы 8 кГц, синхронизированные с чистым эталоном; участники обучают улучшение уже этих сигналов, а не обработку сырых радиоданных. Один сценарий наблюдает диффузор громкоговорителя, второй тонкую алюминиевую фольгу рядом с ним. Обучение и проверка используют LibriSpeech, закрытый тест другой корпус. Разрешены только выданные данные и обучение с нуля, без готовых весов и внешнего дополнения данных.

Результаты. Лидер WHU IASP получает PESQ 1,541, ESTOI 0,248, DNSMOS 2,650 и косинусное сходство MFCC 0,598. У базовой системы значения равны 1,279, 0,166, 1,436 и 0,604. Поэтому рост субъективно ориентированных автоматических шкал не сопровождается улучшением каждого спектрального показателя. Итоговый нормированный балл растёт с 0,2324 до 0,3431, но абсолютные PESQ и ESTOI остаются низкими: до естественного широкополосного голоса далеко.

Ограничения. Речь воспроизводит громкоговоритель, а не живой человек; тест не доказывает одинакового качества на произвольных стенах, окнах и поверхностях. При 8 кГц термин full-bandwidth означает доступный диапазон этого сигнала, не полосу 48-кГц аудио. В обзорной статье нет подробных архитектур победителей, измерений задержки, человеческой разборчивости и WER. Это отчёт о соревновании с новой arXiv-записью, а не обязательно работа, впервые опубликованная в октябре.

Фишка из статьи. Итоговая оценка смешивает сценарии не поровну: 40% веса у прямой вибрации и 60% у вторичной. Внутри каждого сценария усредняются нормированные PESQ и DNSMOS, ESTOI и CS-MFCC. Таблица 1 позволяет увидеть, как влияет более трудная поверхность.

Как это читать: вторичный отражатель остаётся существенно сложнее даже у лидеров, поэтому один общий балл скрывает существенный физический фактор. У ZJU ESTOI выше, чем у победителя, 0,262 против 0,248, но ниже DNSMOS, 2,338 против 2,650. Место в рейтинге зависит от выбора и весов шкал, не является прямым измерением доли понятных слушателю слов.

Источник. Оригинальное название: ICASSP 2026 Radar Acoustic Speech Enhancement (RASE) Challenge. arXiv:2610.32202; полный текст PDF; DOI: 10.1109/ICASSP55912.2026.11463564