Google DeepMind тестирует ИИ-ассистента врача: от текстовых моделей к мультимодальной телемедицине
Исследователи Google DeepMind представили концепцию AI co-clinician — мультимодального помощника, способного анализировать видео и аудио в реальном времени под строгим контролем врача.
Google DeepMind анонсировала новую исследовательскую инициативу под названием AI co-clinician. Цель проекта — создание искусственного интеллекта, который будет работать не вместо врача, а вместе с ним, формируя так называемую триадическую модель помощи (врач, пациент и ИИ). Это важный шаг в развитии медицинских технологий, переносящий фокус с простой генерации текста на комплексное взаимодействие в реальном времени.
Системы здравоохранения по всему миру сталкиваются с серьезными вызовами. По прогнозам Всемирной организации здравоохранения, к 2030 году глобальный дефицит медицинских работников превысит 10 миллионов человек. Ранее ИИ рассматривался как потенциальное решение этой проблемы, однако существующие инструменты не могли полностью удовлетворить потребности клинической практики. Эволюция медицинского ИИ в Google DeepMind началась с успешной сдачи экзаменов моделью MedPaLM и продолжилась системой AMIE, которая имитировала текстовые консультации. Теперь исследователи пошли дальше.
Advancements in research into medical AI so that they might be more trustworthy and helpful for clinicians in assisting patients.
Медицина не ограничивается текстом — она требует визуального и аудиального анализа. Поэтому новый AI co-clinician построен на базе мультимодальных технологий (включая наработки Gemini и Project Astra). В ходе слепых тестирований на 98 реалистичных запросах первичной медико-санитарной помощи система не допустила ни одной критической ошибки в 97 случаях, превзойдя широко используемые врачами инструменты синтеза данных.
Особое внимание уделялось работе с медикаментами. На сложной базе данных OpenFDA (бенчмарк RxQA) модель показала значительный прогресс в ответах на открытые вопросы, которые наиболее точно отражают реальную клиническую практику. Однако настоящим прорывом стали тесты в телемедицинском формате.
