Сбер: GigaDoc Мультимодальный медицинский диагностический ассистент

Основные статьи:

• Виртуальные помощники
• Чат-боты в медицине
• Распознавание речи (технологии, рынок)
• Речевые технологии: на пути от распознавания к пониманию
• Системы поддержки принятия врачебных решений (СППР, CDS)
• Искусственный интеллект в медицине

2024: Представление GigaDoc

11 декабря 2024 года представили Медицинский диагностический ассистент GigaDoc. Данный сервис разработан Центром индустрии здоровья Сбербанка и учёными Лаборатории искусственного интеллекта Сбера. GigaDoc работает на базе нейросетевой модели GigaChat и специализированных медицинских моделях. Его можно будет интегрировать в любое устройство (смартфон или ноутбук) и использовать для мониторинга здоровья человека.

GigaDoc распознаёт ключевые биомаркеры человека: пол, возраст, пульс, индекс массы тела, эмоциональное состояние, риск диабета второго типа, вариабельность сердечного ритма, уровень холестерина и так далее. А также способен предлагать гипотезы о диагнозах на основе предоставленных фотографий. В основе работы ассистента лежат такие технологии, как компьютерное зрение, машинное обучение и дистанционная фотоплетизмография (анализ изменения цвета кожи, который связан с кровотоком и предназначен для измерения частоты сердечных сокращений, дыхания и насыщения крови кислородом).Партнерство под крылом «Колибри-АРМ»

Мультимодальный ассистент GigaDoc в будущем поможет медицинским работникам ускорить первичный скрининг пациентов, определять приоритет оказания медпомощи в зависимости от тяжести заболевания (триаж), отслеживать динамику состояния здоровья больных и проводить качественный мониторинг хронических неинфекционных заболеваний.

Умный GigaDoc можно будет использовать в широком спектре ситуаций. Например, он может стать личным AI-ассистентом врача и помогать ему более точно понимать пациента, собирать анамнез состояния здоровья, а также давать индивидуальные рекомендации. Особенно ценной такая технология может стать во время телемедицинских консультаций. Также GigaDoc можно применять для проведения предрейсовых и производственных осмотров и в работе страховых компаний, чтобы оценивать потенциальные риски здоровья застрахованных.