U-STFT: адаптивный выбор длины окна для частотно-временного анализа

Короткое окно локализует взрывной согласный, длинное разделяет гармоники: U-STFT меняет это соотношение по данным, не выбирая одну длину для всей записи. Метод поддерживает распределение по допустимым историям окна и усредняет комплексные спектры согласованно. Это непосредственно релевантная речевой обработке работа об адаптивном частотно-временном представлении, а не новое разложение EMD или VMD.

Метод. Каждая длина оценивается суммой нормированных временной и частотной энтропий Реньи третьего порядка. Решётка допускает сохранение окна, рост на один шаг и сброс к минимуму; байесовское обновление сглаживает выбор по времени. Линейность DFT превращает взвешенную сумму спектров в преобразование с одним эффективным окном. Для неизменённых коэффициентов отдельного синтезирующего потока вводится нормирование огибающей перекрытия. Оценка избыточной накопленной mix-loss относительно допустимой истории с k переключениями имеет порядок (k+1)log M.

Результаты. В синтетическом опыте при SNR 0 дБ метод разделяет тоны 500 и 532 Гц, как длинное окно, и локализует импульсы, как короткое. Для пяти секунд VCTK, диктор p227, шаг 2 мс и диапазон окон 2–32 мс дают глобальную двумерную энтропию 12,27 бит против 12,51 у покадрового жадного выбора. Ошибка восстановления неизменённого синтезирующего потока порядка 10⁻¹⁶ в двойной точности. На гиперболическом чирпе наблюдаемая избыточная mix-loss 0,526 нат на кадр ниже приведённой границы 0,760.

Ограничения. Речевая проверка иллюстративная: один короткий фрагмент, без оценки распознавания, разборчивости, качества улучшения или слушательского теста. Гарантия mix-loss не означает безусловной гарантии для энтропии итоговой спектрограммы или WER. Линейная стоимость обновления весов относится к числу состояний; вычисление банка DFT остаётся отдельной ценой. Точная обратимость доказана для немодифицированного вспомогательного потока и положительной огибающей, не для произвольного спектрального редактирования с нулевой задержкой.

Фишка из статьи. Речевой пример содержит полезный противовес общему тезису об адаптивности: почти всё время побеждает длинное окно. Главная польза возникает в редких переходных участках, а не в постоянной смене разрешения.

Как это читать: адаптация здесь сохраняет гармоническую структуру на гласных и кратко сбрасывает окно у взрывов. Общая энтропия отличается от длинного фиксированного окна лишь на 0,11 бит и может скрывать локальную пользу. Следующая практическая проверка должна измерять ошибки именно на переходах и учитывать вычислительную стоимость банка, а не только красоту спектрограммы.

Источник. Оригинальное название: Universal Short-Time Fourier Transform: Data-Adaptive Window-Length Selection for Time-Frequency Analysis. arXiv:2610.37795; полный текст PDF.