Fuzzy-FedAvg: адаптивный выбор участников федеративного распознавания эмоций речи

Fuzzy-FedAvg меняет выбор клиентов федеративного распознавания эмоций, когда данные и скорость устройств сильно различаются. Сервер учится учитывать качество локальной модели, время ответа и разнообразие обновлений, а запаздывающие ответы не всегда выбрасываются. Ценность работы в совместной оценке точности, времени и равномерности участия, причём ни один из этих показателей не улучшается автоматически.

Метод. Нечёткое Q-обучение на сервере адаптирует веса трёх критериев по обратной связи глобальной модели. Отдельный логический узел PCAS ранжирует клиентов, контролирует сроки и переносит часть запоздавших обновлений в следующий раунд с ослабленным весом. Одни и те же приоритеты применяются при выборе и агрегации. Распознаватели одинаковы для всех сравнений: свёрточная сеть по 40 MFCC либо 128 мел-полосам. На 30 моделируемых клиентах варьируют перекос классов, число участников и горизонт обучения; IEMOCAP разделён по сессиям, CREMA-D по говорящим.

Результаты. В тяжёлом не-IID режиме с MFCC средний UAR на IEMOCAP составляет 0,437 против 0,394 у FedAvg, на CREMA-D 0,418 против 0,346. Но SCAFFOLD даёт 0,501 и 0,479 соответственно. В основном временном протоколе IEMOCAP обучение занимает 505,14 с против 669,05 с у FedAvg; в отдельной проверке с профилями FedScale заявлено сокращение времени 81,23 ± 6,06%. Это разные опыты, их проценты не следует смешивать.

Ограничения. Время измеряет моделируемое распределённое обучение, а не энергию реального парка телефонов. При более равномерных данных преимущество отбора уменьшается. Метрики участия и качества слабейших клиентов не совпадают: на IEMOCAP худшая клиентская точность у предлагаемого метода даже ниже, чем у FedAvg. Проверены два постановочных корпуса и три случайных запуска; это не доказательство пользы для непрерывного многоязычного распознавания эмоций или формальной защиты приватности.

Фишка из статьи. Таблица IV позволяет увидеть компромисс без рекламного «лучше всех». Ниже IEMOCAP, 30 клиентов, восемь участников за раунд, 80 раундов, α = 0,1; PF измеряет равномерность участия, больше лучше.

Как это читать: Power-of-Choice выигрывает по двум первым столбцам, но значительно концентрирует участие. Fuzzy-FedAvg смягчает этот перекос, однако SCAFFOLD в данном опыте лучше и по UAR, и по времени, и по PF. Значит, адаптивный отбор стоит сравнивать также с коррекцией локального дрейфа, а не только с равномерным FedAvg.

Источник. Оригинальное название: Fuzzy-FedAvg: Server-Aware Client Selection for Federated Speech Emotion Recognition in Heterogeneous Environments. arXiv:2611.08818; полный текст PDF.