RealComm: проверка и адаптация детекторов поддельной речи в реальных каналах связи
RealComm проверяет детекторы синтетической речи после настоящих звонков, а не только после программного добавления кодека и шума. Разные пути ввода, устройства и встроенная обработка способны менять признаки подделки сложнее, чем обычное ухудшение качества. Работа соединяет воспроизводимый набор записей с сравнением адаптации на симуляциях и реальном канале.
Метод. Исходные 2800 записей сбалансированы по подлинности и двум языкам, английскому и китайскому; синтез получен семью системами. Разбиение производится по исходной записи, и все её перезаписанные версии остаются в одной части. Тест RealCommBench содержит 560 независимых источников и 23 520 записей в 42 условиях. Сравниваются замороженный детектор F, программная аугментация A, обучение на реальных звонках T и сочетание A+T.
Результаты. Для Teffic-Audio обучение на звонках снижает совокупный EER с 37,94 до 23,84%, а A+T — до 22,37%. WavLM-L и AASIST после A+T имеют EER 34,16 и 36,90%. Даже у лучшей системы акустический ввод через воспроизведение остаётся трудным: 27,86% для телефонной трубки и 28,26% для громкой связи против 7,20% при прямом вводе в микрофонный тракт.
Ограничения. 23 520 записей не являются таким же числом независимых речевых примеров: это повторные условия для 560 источников. Обучающая и тестовая части используют те же семь генераторов; проверяется перенос содержания и маршрутов связи, не неизвестные способы подделки. Оставленное устройство расширяет проверку лишь в рамках данного набора аппаратуры. Низкая ошибка на цифровых файлах не гарантирует защиты звонка.
Фишка из статьи. Добавление симуляции к реальным звонкам улучшает общий результат, но для AASIST ухудшает исходный цифровой домен. Раздел VIII показывает скрытый средним показателем конфликт.
| AASIST | EER звонков, % | EER цифровых файлов, % |
|---|---|---|
| Обучение на звонках T | 37,96 | 6,07 |
| Симуляция и звонки A+T | 36,90 | 8,21 |
Как это читать: уменьшение ошибки звонков на 1,06 п.п. сопровождается ухудшением цифровой проверки на 2,14 п.п. У других архитектур такой конфликт выражен иначе. Поэтому адаптацию надо оценивать по обоим доменам и путям ввода; универсальное утверждение «аугментация повышает устойчивость» здесь было бы слишком сильным.
Источник. Оригинальное название: RealComm: Benchmarking and Adapting Audio Deepfake Detection over Real Communication Channels. arXiv:2610.27459; полный текст PDF.