CAML: метаобучение с учётом конфликтов градиентов для обнаружения речевых подделок

Детектор синтетической речи легко запоминает артефакты известных генераторов и теряет точность при смене кодека или способа синтеза. CAML пытается сделать метаобучение на искусственных сменах домена устойчивее: конфликтующие направления обновления не усредняются вслепую. Основное изменение относится к оптимизатору, а не к архитектуре акустического детектора.

Метод. В каждом эпизоде исходные домены делятся на обучающую и проверочную части. Если их градиенты направлены навстречу друг другу, base-DGS сохраняет обучающий градиент и убирает только конфликтующую компоненту проверочного. EMA-DGS заменяет мгновенное опорное направление экспоненциальным средним; послойный вариант выполняет проверку отдельно для каждого тензора параметров. Это развитие ранее предложенной авторами асимметричной проекции, а не полностью новая идея gradient surgery. Проверены XLS-R 300M с разными выходными сетями и обучение на 22 доменах.

Результаты. С XLSR-AASIST глобальный EMA-DGS получает EER 1,43% на ASVspoof 2021 DF, 4,98% на In-the-Wild и 2,87% на Fake-or-Real. У обычного MLDG соответственно 2,74%, 7,33% и 5,81%. В многокорпусной постановке XLSR-Mamba достигает 4,65% на In-the-Wild, но на знакомом ASVspoof 5 все метаобучающие варианты уступают ERM: 9,14–10,24% против 8,57%. Поэтому устойчивость к переносу здесь покупается не безусловным улучшением всех тестов.

Ограничения. Нужны содержательно различные исходные домены: случайное разделение похожих атак почти не воспроизводит реальную смену условий. Большой SSL-кодировщик и двухуровневое обучение остаются дорогими; статья не даёт оснований объявлять метод облегчённым. Лучший способ проекции зависит от выходной архитектуры, а максимум относительного улучшения 45,2% нельзя переносить на любой корпус или детектор.

Фишка из статьи. Таблица I показывает нетривиальную развилку: более детальная послойная коррекция не всегда лучше глобальной. Ниже EER на двух внешних корпусах; меньше означает лучше. Сравниваются варианты одного семейства обучения.

Как это читать: для AASIST дробление вмешательства ухудшает оба результата, а для Conformer-TCM меняет компромисс между корпусами. Это аргумент в пользу проверки гранулярности оптимизатора на конкретной модели. Снижение частоты конфликтов само по себе ещё не гарантирует лучший EER на каждом новом домене.

Источник. Оригинальное название: Conflict-Aware Meta-Learning for Generalizable Speech Deepfake Detection. arXiv:2611.08758; полный текст PDF.