NAVE: адаптивная нормализация и Conformer для обнаружения подводных вокализаций

NAVE решает задачу поиска слабых низкочастотных вокализаций в длительных подводных записях. Для речевого исследователя работа интересна конструкцией входа: удалением стационарной комплексной составляющей, адаптивным управлением усилением PCEN и частотно-зависимыми свёртками. Здесь меняется обработка обычной спектрограммы, а не предлагается новый EMD-, VMD- или иной адаптивный частотно-временной базис.

Метод. При частоте дискретизации 250 Гц используется STFT с окном 256 отсчётов, примерно одна секунда, и шагом 20 мс. В каждом частотном отсчёте вычитается комплексное среднее по сегменту; на вход идут модуль, синус и косинус фазы, а также PCEN исходного модуля. Частотно-динамические свёртки смешивают четыре базовых ядра. Четыре блока Conformer содержат широкую временную свёртку: 153 кадра, или 3,06 с. Модель имеет около 2,71 млн параметров. Порог каждого класса подбирается по двум площадкам и проверяется на третьей.

Результаты. На BioDCASE 2026 Task 2 итоговый macro F1 равен 0,518 ± 0,016 по пяти запускам против 0,475 у WhaleVAD-BPN. При таком же усреднении площадок, как у ориентира, результат NAVE составляет 0,510 ± 0,012. Улучшение в основном приходится на трудные нисходящие D-сигналы; показатель длинных тональных BMABZ при сопоставимом усреднении, наоборот, ниже: 0,581 против 0,615. Разницу двух способов агрегирования авторы отдельно раскрывают.

Ограничения. Это специализированный тест на трёх проверочных площадках, а не доказательство переноса на широкополосную речь. Площадки используются также для выбора контрольной точки, поэтому LOSO по порогам не заменяет полностью независимый внешний тест. Обработка с глобальным вниманием и 60-секундными сегментами не является причинным потоковым детектором. Расширение ядра после примерно 65 кадров даёт убывающую отдачу, а небольшие различия сопоставимы с разбросом запусков.

Фишка из статьи. Таблица 2 показывает цену адаптивной нормализации. PCEN отслеживает фон примерно за 0,8 с: слабый короткий сигнал становится заметнее, но долго тянущийся тон тоже начинает восприниматься как фон. Ниже последовательное добавление компонентов к одному семейству моделей.

Как это читать: адаптация к фону не нейтральна к длительности события: выигрыш D-класса сопровождается потерей длинных тонов. Широкая свёртка затем частично компенсирует это. Для похожей речевой задачи стоит проверять длительные гласные и короткие согласные раздельно; это инженерная гипотеза по аналогии, не проверенный в статье речевой результат.

Источник. Оригинальное название: NAVE: A Normalized, Adaptive Conformer for Antarctic Whale Vocalization Detection. arXiv:2611.09642; полный текст PDF; DOI: 10.5281/zenodo.22954971