MedAstra: поиск медицинских сведений по речи без предварительной транскрипции запроса

MedAstra предлагает искать текстовые сведения непосредственно по звуковому вектору, чтобы ошибка в медицинском термине не становилась единственным входом поиска. Но доступная статья сама существенно ограничивает экспериментальные утверждения: происхождение запросов и записи ряда старых запусков не восстановлены. Полезнее читать её как разбор интерфейсов и проверки доказательств, а не как подтверждённую готовую клиническую систему.

Метод. Замороженный WavLM усредняет признаки восьмисекундного звукового окна; двухслойный адаптер совмещает их с пространством замороженного E5. Такой вектор может искать аудиозаписи с текстовыми метаданными и обычные текстовые документы. Лексический BM25, текстовое перераспределение кандидатов, исправление строк и генератор уже требуют текстового канала. Дополнительный граф предлагает различающие симптомы и связи, но основан на совпадении терминов и эвристиках, а не на доказанном клиническом выводе. Одна детерминированная точка в векторном пространстве не моделирует распределение акустической неопределённости.

Результаты. В таблице 1 сохранены ранее сообщённые Recall@10: 81,0% для Whisper с плотным поиском, 87,6% для речевого MedAstra и 90,4% для гибрида. Это доля запросов, где нужный документ попал в первые десять, а не точность медицинского ответа. Авторы прямо сообщают, что текущая редакция не добавляет новых испытаний, число старых запусков и источники текстовых запросов не подтверждены. Поэтому разности нельзя считать воспроизведённым причинным преимуществом отказа от распознавания.

Ограничения. Медицинский исполняемый тракт получает эталонный текст вопроса, а контрольный Whisper может подменять им свою транскрипцию. Не подтверждены полные обучающие манифесты, контрольные точки и часть операций измерения времени. Только английский и синтетические акустические возмущения, без клинического переноса; ограничение окна восемью секундами может отрезать отрицания и важные подробности. Показатели поддержки ответа источниками отозваны из-за недокументированного судейства. Их нельзя заменять обычной правильностью выбранной буквы.

Фишка из статьи. Конкретная проверка модуля исправления терминов сильнее общих обещаний об устойчивости. В доступной реализации при пустом семантическом окружении разные строки не могут преодолеть порог автоматической замены: максимальная сумма фонетического и редакционного вкладов равна 0,725, а требуется строго больше 0,75.

Как это читать: модуль может предложить кандидатов, но в этом условии не заменит даже очевидную опечатку. Приписать ему ранее опубликованный выигрыш исправления нельзя без исходной конфигурации и трассировки. Инженерная ценность — проверять фактические входы каждого модуля и достижимость его порога; название «ASR-less» относится к первому плотному поиску, не ко всем последующим стадиям.

Источник. Оригинальное название: MedAstra: ASR-less Speech Retrieval with Diagnostic Grounding for Medical QA. arXiv:2611.01261; полный текст PDF.