A3: голосовой агент с серверным ускорением и локальным резервом при сбоях связи
Сервер ускоряет голосового агента, но делает его зависимым от сети. A3 запускает серверный путь первым и при необходимости добавляет полный локальный резерв, выбирая срок запуска по истории задержек и состоянию связи. Работа полезна не как новый речевой синтезатор, а как измерение системного компромисса: доступность, задержка, точность меньшей модели и лишние вычисления меняются вместе.
Метод. На сервер отправляют целые стадии распознавания, LLM и при необходимости синтеза. При узком канале сервер возвращает текст, а синтез выполняется локально. Контроллер следит за пробами связи и предыдущими серверными задержками; резерв запускается по адаптивному сроку или при отказе. Первый полный ответ выигрывает, второй путь отменяется; число одновременно работающих резервов ограничено. На Jetson Orin AGX помещается полный резерв Qwen3-ASR-1.7B, Qwen3-1.7B и Kokoro-82M; сервер с RTX A4500 использует Qwen3-4B. Испытанный Orin Nano не вмещает полный локальный тракт рядом с системой и остаётся зависимым от сервера.
![Сервер стартует первым, локальная копия — по сроку ожидания. Голосовой запрос: Диспетчер запускает серверную ветвь сразу. Сервер: ASR → LLM [→ TTS]: Возвращает аудио либо текст для локального синтеза. Монитор связи + контроллер: Новое: срок старта резерва по связи и прошлым задержкам. Полный локальный резерв: Новое: ASR → LLM → TTS; только если помещается на устройстве. Первый полный ответ: Новое: проигравшая ветвь отменяется; есть лимит параллелизма. Доступность ≠ та же точность: Меньшая локальная LLM может ошибаться чаще.](/static/news-diagrams/arxiv-2611-18064.png)
Результаты. На исправном канале медиана A3 равна 7,1 с против 7,2 с у серверной ветви и 14,6 с у локального агента. При ограничении полосы передача аудио занимает 17,6 с, текстовый путь 9,6 с, A3 выбирает его и получает 9,7 с. При полном обрыве AGX отвечает на все 24 запроса с медианой 14,0 с; это не означает, что все ответы укладываются в 20 секунд: таких 79%. В моделировании доля ответов до 30 с составляет 0,91 против 0,87 у резерва по фиксированному p95.
Ограничения. Основная аппаратная нагрузка содержит только четыре синтетических вопроса и 24 запроса на условие; между платами и запусками заметна вариативность. Полевой опыт — офлайн-воспроизведение телефонной сетевой трассы с измеренной локальной задержкой AGX, а не реальная работа Jetson в поезде. Меньшая модель хуже отвечает: на 100 озвученных GSM8K сервер даёт 90%, резерв AGX 77%. Оценка задержки может устаревать, если резерв стартует всегда. Нельзя обещать автономность устройству, где резерв не помещается.
Фишка из статьи. Раздел 4.2 содержит отрицательный результат автоматического выбора формы ответа. На Nano во время периодических обрывов оценённая скорость загрузки падает, контроллер выбирает текст, но медленный местный синтез делает этот выбор хуже передачи аудио. Это не небольшая потеря на графике: меняется доля ответов, успевших к сроку.
| Nano, периодические обрывы | Медиана, с | Ответы до 20 с |
|---|---|---|
| Сервер возвращает аудио | 11,2 | 0,80 |
| Автовыбор аудио/текста | 40,0 | 0,13 |
Как это читать: уменьшение сетевого трафика полезно только при достаточной скорости локального синтеза. Измерять форму ответа нужно вместе с состоянием связи и стоимостью оставшихся стадий. Успех AGX и неудача Nano не противоречат друг другу: политика работает на разных ресурсных ограничениях.
Источник. Оригинальное название: A$^3$: Adaptive Audio Agent Framework for Collaborative Edge Computing. arXiv:2611.18064; полный текст PDF.