Почему omni-модели расходятся в ответах: анализ подпространств внутренних представлений
Признак, по которому можно предсказать расхождение ответов на звук и изображение, не обязательно управляет этим расхождением. Авторы находят компактное подпространство, считывающее собственный ответ omni-модели, и отдельно — направления, предсказывающие несогласие модальностей. Прямые вмешательства показывают, почему хорошую точность диагностического зонда нельзя автоматически считать объяснением механизма ошибки.
Метод. Один и тот же вопрос XModBench предъявляют отдельно со звуком и с изображением, сохраняя варианты A–D. На позиции генерации ответа обучают линейный зонд четырёх классов; из-за инвариантности softmax его эффективное пространство имеет не более трёх измерений. Затем из скрытых состояний удаляют эти направления и по паре остатков и их разности обучают бинарный зонд несогласия. Два ведущих направления его коэффициентов задают отдельную плоскость. Перекрёстная проверка группируется по объекту, чтобы две модальности одного вопроса не попадали в разные части. Ключевой следующий шаг — одинаково нормированные сдвиги внутри найденных пространств и случайные контроли на том же слое. Анализ охватывает Qwen2.5-Omni, Gemma-4-E4B и MiniCPM-o 4.5.

Результаты. В каждой модели исследованы 1350 внешних и 465 пространственных вопросов. На Qwen2.5-Omni для внешних вопросов сбалансированная точность зонда несогласия составляет 0,510 внутри пространства ответа, 0,704 в ортогональном остатке и 0,705 в полном состоянии. Двух направлений остатка достаточно для 0,692 против 0,515 у случайных двух направлений. При этом конечный трёхмерный зонд совпадает с собственными ответами модели более чем в 93% случаев во всех разбиениях по модальности и согласию. Это восстановление поведения модели, а не точность относительно правильных ответов задачи.
Ограничения. Три модели, две семьи вопросов и четыре варианта ответа ограничивают перенос на свободную речь и сложный диалог. Зонд использует парные представления обоих предъявлений, поэтому не является готовым однопроходным детектором галлюцинаций. Сильные вмешательства выводят состояния из обычного распределения; дополнительный опыт с удалением направлений даёт более слабую и неоднозначную картину. Отсутствие эффекта сдвига не доказывает отсутствие любой причинной роли информации.
Фишка из статьи. Таблица 11 сравнивает число сменившихся ответов из 100 при силе сдвига 40 стандартных отклонений координат целевого пространства. Это независимая проверка влияния, а не очередная метрика точности зонда. Три примера ниже относятся к семье внешних вопросов.
| Модель | Сдвиг в пространстве ответа | Сдвиг в плоскости несогласия | Случайный контроль |
|---|---|---|---|
| Qwen2.5-Omni | 98 / 100 | 1 / 100 | 0 / 100 |
| Gemma-4-E4B | 100 / 100 | 0 / 100 | 1 / 100 |
| MiniCPM-o 4.5 | 100 / 100 | 1 / 100 | 3 / 100 |
Как это читать: сильное диагностическое считывание и сильное управление ответом находятся в разных местах. В пространственной задаче Gemma случайный контроль меняет 18 ответов, а плоскость несогласия шесть: важен разрыв с пространством ответа, а не утверждение, будто диагностическая плоскость всегда слабее любого случайного сдвига.
Источник. Оригинальное название: Understanding Cross-Modal Inconsistency through Representation Subspaces in Omni Models. arXiv:2611.22619; полный текст PDF.