Модель Neuro-VL разбирает снимки мозга и в тестах обошла конкурентов
Авторы работы на arXiv представили Neuro-VL — модель для разбора обследований мозга. По их данным, она обошла ведущие универсальные и специализированные медицинские модели.
Снимки нужны, чтобы поставить диагноз, выбрать лечение и наблюдать за пациентом. Работа показывает, что ИИ можно учить на данных обычных клиник. Пока это только исследование.
Коротко
- Модель учили почти на миллионе исследований мозга из обычной клинической помощи.
- Она сравнивает повторные обследования, чтобы оценить, как развивается болезнь.
- Ошибочным клиническим допущениям в запросе она поддавалась реже, чем ведущие модели OpenAI и Google.
Модель читает обследование целиком и говорит о нём обычным языком
Neuro-VL относится к моделям «зрение — язык». Они работают и с изображениями, и с текстом.
Авторы пишут, что модель интерпретирует обследование целиком. О находках с ней можно разговаривать на естественном языке.
Ещё она сравнивает обследования, сделанные в разное время. Так она оценивает, как болезнь меняется.
Данные клиник дали модели преимущество в тестах
Авторы описывают проблему. Многие медицинские модели решают узкие задачи. Закрытым универсальным моделям недоступны частные клинические снимки, а без них медицинской экспертизы не получить.
Neuro-VL обучали на материале рутинной помощи. Проверяли её на внутренних и международных наборах данных.
По словам авторов, модель лучше соперников находила и локализовала отклонения. Она также описывала их и составляла полные радиологические заключения.
Ошибочные клинические допущения сбивали её реже
Авторы проверили, как модель реагирует на запросы с ложными клиническими допущениями. По их данным, она устояла надёжнее ведущих моделей OpenAI и Google.
Конкретных цифр в описании работы нет.
Что это значит для вас
- Для пациента это пока не услуга: сведений о том, что модель работает в больницах, в описании нет.
- Судить о пользе для врачей рано: о проверке модели в их реальной работе в описании не сказано.
Что делать
Пока ничего: дождитесь полного текста работы и сообщений авторов о проверках и доступности модели.
Чего пока неизвестно
В описании нет цифр точности и названий клиник. Не сказано, где и когда модель смогут применять и проверяли ли её независимые специалисты.
Редакция «Применяй ИИ» · Как мы готовим новости