Дата публикации
science

ИИ-врач, который сам изобретает себе новые инструменты для анализа снимков

Что открыли

Исследователи представили MACRO — медицинского ИИ-агента, который сам учится придумывать новые «суперинструменты» для анализа снимков.

Обычно такие агенты работают с фиксированным набором действий: посмотреть снимок, учесть данные пациента, измерить что‑то на изображении, сформулировать вывод. Набор инструментов и порядок их вызова жёстко задают до запуска системы.

MACRO идёт другим путём. Он просматривает собственные проверенные сессии работы — пошаговые траектории, где врачи подтвердили корректный результат. В этих историях агент находит повторяющиеся удачные цепочки действий, склеивает их в составные инструменты и добавляет в свой арсенал как новые «примитивы» высокого уровня.

Каждый такой составной инструмент — это готовый многошаговый сценарий: от чтения снимка до количественной оценки и финального вывода. Исследователи показали, что такая самообучающаяся библиотека инструментов повышает точность сложных многошаговых задач и улучшает работу агента на разных медицинских датасетах и типах задач.

Как исследовали

Авторы взяли несколько наборов медицинских изображений и задач: от базовой интерпретации снимков до более сложных сценариев с несколькими шагами анализа.

MACRO работал как агент, который вызывает специализированные медицинские инструменты: анализ изображений, работа с клиническим контекстом, численные измерения. Исследователи собирали проверенные траектории выполнения задач — последовательности вызовов инструментов, которые приводили к корректному результату.

На этих траекториях MACRO обучался находить повторяющиеся успешные последовательности, превращать их в составные инструменты и затем использовать их как обычные функции.

Чтобы агент не забывал, что он всё‑таки работает с картинками, авторы добавили лёгкую память по визуальным признакам. Она связывает выбор инструмента с конкретным визуальным и клиническим контекстом.

Поверх этого они запустили тренировочный цикл, похожий на GRPO: агент получает поощрения за надёжный вызов найденных составных инструментов и постепенно улучшает свою стратегию. Вся схема работает в замкнутом цикле и требует минимального внешнего контроля.

Что это меняет на практике

Главная проблема классических медицинских ИИ-агентов — их хрупкость. Как только меняется тип задач, требования к диагностике или статистика пациентов, заранее прописанные цепочки инструментов начинают давать сбои. Их приходится вручную перенастраивать, что долго и дорого.

MACRO предлагает другой подход: агент сам накапливает «опыт» и превращает его в новые, более сложные инструменты. По мере того как через систему проходят разные кейсы, библиотека таких составных инструментов растёт, а поведение агента становится богаче.

В экспериментах на разных датасетах и задачах исследователи показали: автоматическое открытие составных инструментов стабильно повышает точность многошаговых сценариев и улучшает перенос между доменами по сравнению с сильными базовыми системами и свежими агентными методами.

Для клиник это значит меньше ручной настройки и более предсказуемое поведение ИИ при смене протоколов и оборудования. Для разработчиков медтеха — шанс строить агенты, которые со временем становятся полезнее без полного пересмотра архитектуры.

Код MACRO авторы обещают выложить после принятия работы, так что до реальных интеграций в продукты ещё один шаг — но техническая база уже описана.

Что это значит для вас

Если вы работаете с медицинскими ИИ-системами — PACS, автоматический разбор КТ, МРТ или рентгена — MACRO показывает, куда движется следующий виток: от «жёстко прописанного ассистента» к агенту, который учится на собственных успешных сессиях и превращает их в готовые сценарии.

Для врачей это потенциально более предсказуемые и контекстно‑чувствительные подсказки: агент учитывает не только картинку, но и историю похожих кейсов. Для продуктовых команд — архитектура, где не нужно каждый раз руками собирать новые пайплайны под каждую задачу.

До появления MACRO в конкретном софте ещё предстоит пройти этап открытого кода, валидации и сертификации. Но если вы уже проектируете ИИ-агентов для медицины, логика «самооткрытия» составных инструментов — то, что имеет смысл закладывать в новые версии прямо сейчас.


Читайте также

🔗 Источник: https://arxiv.org/abs/2603.05860
ИИ-врач, который сам изобретает себе новые инструменты для анализа снимков — VogueTech | VogueTech