TurnTurk-GPT: предсказание конца реплики по турецкому тексту

В турецком сигнал завершённости часто находится внутри суффиксов последнего глагола, а не только в паузе. TurnTurk-GPT дообучает турецкую GPT-2 предсказывать специальную границу хода диалога. Работа ценна сильным контролем без дообучения и разделением знакомых и незнакомых говорящих: они существенно меняют вывод о пользе адаптации.

Метод. Модель на 124 млн параметров получает историю с метками двух участников и токеном смены хода. После каждого полного слова оценивается вероятность этого токена. Сравниваются синтетическое обучение, реальные диалоги, смешивание и последовательность синтетика→реальные данные. Реальный корпус содержит шесть записей, шесть участников и 578 ходов; синтетический 1625 диалогов. Текст приведён к нижнему регистру без пунктуации, но это финальные транскрипции, не пересматриваемые гипотезы живого распознавателя. Пороги выбираются вложенной проверкой, интервалы — по целым записям.

Результаты. При непересекающихся записях последовательное обучение достигает AP 0,148 против 0,100 у многоязычного детектора LiveKit и 0,130 у вероятности перевода строки исходной GPT-2. На незнакомых говорящих AP падает до 0,120, и преимущество перед исходной моделью статистически не установлено. Удаление суффиксов последнего слова снижает AP на 44%, аналогичная порча внутреннего слова лишь на 2%. Обучение только на синтетике даёт 0,082, хуже сильного контроля без адаптации.

Ограничения. Шесть разговоров слишком мало для общего вывода о турецкой речи; разбиение по говорящим оставляет для обучения лишь две-три записи. Суффиксная абляция обрезает слово до четырёх букв и меняет не только морфологию. Нет акустики, ошибок потокового распознавания и измеренной конечной задержки. Синтетическое предобучение значимо лучше смешивания, но не обучения только на реальной речи. AP при редких границах оценивает ранжирование; высокий относительно случайного AP ещё не означает пригодный самостоятельный триггер ответа.

Фишка из статьи. Таблица IV сравнивает реальные рабочие точки при одинаковой полноте 70%, а не лучшие пороги каждой системы. PP обозначает долю ложных ответов перед паузами внутри незаконченного хода.

Как это читать: даже лучший вариант даёт около десяти ложных решений на одно верное и не лучше исходной GPT-2 в этой рабочей точке. Преимущество AP сосредоточено в узком диапазоне наиболее уверенных решений. Текстовый компонент может помогать общей модели завершения, но запускать ответ только по нему здесь нельзя. В реальном агенте нужна отдельная проверка в моменты пауз вместе с просодией и речевой активностью, а не только после каждого слова.

Источник. Оригинальное название: TurnTurk-GPT: Text-Based Turn-Taking Prediction for Turkish. arXiv:2610.42010; полный текст PDF.