Елена Цифровой двойник телеведущей Сбербанка

Продукт
Разработчики: Лаборатория робототехники Сбербанка (Sberbank Robotics Laboratory), Центр Речевых Технологий (ЦРТ), CGF
Дата премьеры системы: Апрель 2019 года
Технологии: Речевые технологии,  Робототехника

18 апреля 2019 года Сбербанк сообщил о создании цифрового двойника телеведущей — Елены. Елена является новостным телеведущим Сбербанка и может вести новостные сюжеты, используя лишь текст для генерации полноценного видеоизображения и речи, сопровождая это мимикой и эмоциями реального человека.

«Цифровой двойник телеведущей» — это сложная разработка, которая состоит как из технологий, имеющихся на рынке, так и из уникальных, созданных в рамках проекта. Автоматическая генерация мимики является нетривиальной задачей, над решением которой удалось справиться лишь немногим компаниям в мире, сообщают в банке.

Елена является совместной разработкой Лаборатории робототехники Сбербанка и двух российских компаний: ЦРТ обеспечивает опытную систему синтеза речи на основе искусственных нейронных сетей, а компания CGF Innovation комбинирует методы искусственного интеллекта и инструменты создания фотореалистичной компьютерной графики.

Как утверждают в Сбербанке, новая разработка является уникальной и существенно опережает аналогичные решения, существующие на российском рынке.

«
Сейчас никого не удивить полностью виртуальными 3D-моделями, активно применяемыми в таких сферах, как кино и компьютерные игры. Уникальность Елены в том, что она позволяет полностью автоматизировать труд телеведущей: созданный журналистом текст можно оцифровать и получить конечный продукт — новостной сюжет — для трансляции зрителям, - отметил Лев Хасис, первый заместитель Председателя Правления Сбербанка.
»

Сфера применения данной технологии широка: корпоративные и массовые коммуникации, реклама, создание обучающих материалов, социальная работа с пенсионерами — вплоть до использования в бытовых устройствах. В Сбербанке предполагается применять робота для создания новостных выпусков и представления новостей на Сбербанк TV и их распространения, создания видеорекламы продуктов, услуг и товаров банка, компаний его экосистемы и заказчиков, а также для представления проектов, программ, достижений, планов, образовательных и обучающих программ, курсов Сбербанка и компаний Группы Сбербанк на форумах, выставках и других подобных мероприятиях.

Работа над проектом «Елена — цифровой двойник телеведущей» продолжается. Есть несколько направлений его развития: совершенствование качества мимики, добавление эмоций, движений, виртуальной студии, улучшение технических параметров — скорости и разрешения, создание двойников для автономной работы в устройствах.



ПРОЕКТЫ (1) ИНТЕГРАТОРЫ (1) СМ. ТАКЖЕ (2)


Подрядчики-лидеры по количеству проектов

За всю историю
2022 год
2023 год
2024 год
Текущий год

  Promobot (Промобот) (31)
  Яндекс (Yandex) (15)
  Cognitive Pilot (Когнитив Роботикс) (14)
  Nvidia (Нвидиа) (11)
  Сбербанк (11)
  Другие (537)

  Mains Lab (Мэйнс Лаборатория) (2)
  Яндекс (Yandex) (2)
  Московский центр инновационных технологий в здравоохранении Медтех (2)
  VizorLabs (Визорлабс) (1)
  Мотив НТ (Мотив нейроморфные технологии) (1)
  Другие (45)

  Департамент информационных технологий Москвы (ДИТ) (2)
  Яндекс (Yandex) (2)
  Яндекс.Облако (Yandex Cloud) (2)
  Инфосистемы Джет (2)
  Fora Robotics (Фора Роботикс) (2)
  Другие (43)

  Наносемантика (Nanosemantics Lab) (2)
  Сбер Бизнес Софт (2)
  Синимекс (Cinimex) (2)
  Геоскан (Geoscan) (2)
  Университет Иннополис (2)
  Другие (59)

  GlowByte, ГлоуБайт (ранее Glowbyte Consulting, ГлоуБайт Консалтинг) (2)
  Ситроникс (Sitronics) (1)
  Социальный код (1)
  Цифровые технологии и платформы (ЦТиП) (1)
  Яндекс (Yandex) (1)
  Другие (18)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2022 год
2023 год
2024 год
Текущий год

  Promobot (Промобот) (10, 32)
  ABB Group (8, 23)
  Cognitive Pilot (Когнитив Роботикс) (3, 21)
  Cognitive Technologies (Когнитивные технологии) (1, 21)
  Яндекс (Yandex) (2, 12)
  Другие (613, 150)

  Бирюч-НТ Инновационный Центр (2, 1)
  Эфко ГК (2, 1)
  Транспорт будущего (2, 1)
  Cognitive Pilot (Когнитив Роботикс) (1, 1)
  Gaskar Group (Гаскар Интеграция) (1, 1)
  Другие (13, 13)

  Fora Robotics (Фора Роботикс) (1, 2)
  Rozum Robotics (Розум Роботикс) (1, 1)
  Роботех (Robotech) (1, 1)
  Яндекс.Маркет (1, 1)
  3D Bioprinting Solutions (3Д Биопринтинг Солюшенс) (1, 1)
  Другие (5, 5)

  Яндекс (Yandex) (1, 2)
  Pudu Robotics (Pudu Technology) (1, 2)
  Unitree Robotics (1, 1)
  КиберСклад (1, 1)
  Intuitive Surgical (1, 1)
  Другие (2, 2)

  Яндекс.Маркет (1, 1)
  Navio (ранее SberAutoTech) (1, 1)
  Яндекс (Yandex) (1, 1)
  QRobotics (Кьюроботикс) (1, 1)
  Другие (0, 0)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2022 год
2023 год
2024 год
Текущий год

  Promobot - 26
  Cognitive Agro Pilot Система автоматического вождения - 21
  ABB IRB Промышленные роботы - 19
  Яндекс.Ровер - 11
  Da Vinci (робот-хирург) - 11
  Другие 134

  Лаборатория знаний: Neuro Angel - 1
  Роббо Класс - 1
  YaCuAi Робот Unit - 1
  NTR Robotics (БПЛА для закрытых пространств) - 1
  Astabot Робот-палетный перевозчик - 1
  Другие 9

  For-1 Антропоморфный робот - 2
  МИСиС и 3D Bioprinting Solutions: 3D-биопринтер в виде роборуки для применения в операционной in situ - 1
  Da Vinci (робот-хирург) - 1
  Aripix A1 Робот-манипулятор - 1
  Dobot CR-серия Коллаборативные роботы - 1
  Другие 2

  Яндекс.Ровер - 2
  Pudu CC1 Робот-уборщик - 2
  Роботы КиберСклад - 1
  Unitree H1 Антропоморфные роботы - 1
  Ronavi S-серия Роботы для сортировки товаров - 1
  Другие 2

  QRobotics Phantas Роботы-уборщики - 1
  Яндекс.Ровер - 1
  Navio: L5 Автономный магистральный тягач - 1
  Spectro (робот-инвентаризатор) - 1
  Другие 0

Подрядчики-лидеры по количеству проектов

За всю историю
2022 год
2023 год
2024 год
Текущий год

  Группа компаний ЦРТ (Центр речевых технологий) (46)
  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (30)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (28)
  SteadyControl (19)
  Naumen (Наумен консалтинг) (15)
  Другие (214)

  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (12)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (7)
  Voice Systems Robotics (VSR, VS Robotics) (3)
  Naumen (Наумен консалтинг) (3)
  SteadyControl (2)
  Другие (14)

  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (9)
  Группа компаний ЦРТ (Центр речевых технологий) (8)
  SteadyControl (6)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (5)
  Unlimited Production (Анлимитед Продакшен, eXpress) (4)
  Другие (29)

  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (6)
  SteadyControl (5)
  Unlimited Production (Анлимитед Продакшен, eXpress) (5)
  Robovoice (Робовойс) (3)
  SberDevices (СалютДевайсы, ранее СберДевайсы) (3)
  Другие (38)

  Voice Systems Robotics (VSR, VS Robotics) (2)
  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (1)
  Наносемантика (Nanosemantics Lab) (1)
  Проф ИТ (Prof IT) Ростов-на-Дону (1)
  Сбербанк (1)
  Другие (5)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2022 год
2023 год
2024 год
Текущий год

  Группа компаний ЦРТ (Центр речевых технологий) (18, 48)
  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (4, 31)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (12, 30)
  SteadyControl (1, 24)
  SteadyControl HoReCa (1, 24)
  Другие (409, 235)

  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (2, 12)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (2, 7)
  SteadyControl HoReCa (1, 3)
  Voice Systems Robotics (VSR, VS Robotics) (1, 3)
  Naumen (Наумен консалтинг) (1, 3)
  Другие (12, 16)

  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (1, 9)
  Группа компаний ЦРТ (Центр речевых технологий) (4, 7)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (2, 7)
  SteadyControl HoReCa (1, 7)
  SteadyControl (1, 7)
  Другие (18, 30)

  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (2, 7)
  Сбербанк (3, 5)
  SteadyControl (1, 5)
  SteadyControl HoReCa (1, 5)
  Unlimited Production (Анлимитед Продакшен, eXpress) (1, 5)
  Другие (28, 45)

  Voice Systems Robotics (VSR, VS Robotics) (1, 2)
  SteadyControl HoReCa (1, 1)
  Группа компаний ЦРТ (Центр речевых технологий) (1, 1)
  Наносемантика (Nanosemantics Lab) (1, 1)
  СалютДевайсы (ранее SberDevices) (1, 1)
  Другие (7, 7)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2022 год
2023 год
2024 год
Текущий год

  МТТ VoiceBox - 24
  SteadyControl Система контроля и управления персоналом - 24
  BSS Digital2Speech - 21
  Voice2Med Система распознавания речи в медицине - 14
  EXpress Защищенный корпоративный мессенджер - 13
  Другие 225

  МТТ VoiceBox - 11
  BSS Digital2Speech - 6
  Naumen Erudite - 3
  VS Robotics: VS Робот-оператор - 3
  SteadyControl Система контроля и управления персоналом - 3
  Другие 14

  МТТ VoiceBox - 9
  SteadyControl Система контроля и управления персоналом - 7
  EXpress Защищенный корпоративный мессенджер - 6
  BSS Digital2Speech - 6
  SmartLogger II - 4
  Другие 23

  SteadyControl Система контроля и управления персоналом - 5
  EXpress Защищенный корпоративный мессенджер - 5
  BSS Digital2Speech - 4
  Napoleon IT отзывы - 3
  Robovoice Пользовательская no-code платформа для разработки ИИ-ботов - 3
  Другие 36

  VS Robotics: VS Робот-оператор - 2
  ЦРТ: Voice2X Платформа голосового ввода для крупного бизнеса - 1
  Сбер: GigaChat - 1
  МТС Exolve: Сервис речевой аналитики на базе нейросетей - 1
  BSS: Речевая аналитика - 1
  Другие 5