Елена Цифровой двойник телеведущей Сбербанка

Продукт
Разработчики: Лаборатория робототехники Сбербанка (Sberbank Robotics Laboratory), Центр Речевых Технологий (ЦРТ), CGF
Дата премьеры системы: Апрель 2019 года
Технологии: Речевые технологии,  Робототехника

18 апреля 2019 года Сбербанк сообщил о создании цифрового двойника телеведущей — Елены. Елена является новостным телеведущим Сбербанка и может вести новостные сюжеты, используя лишь текст для генерации полноценного видеоизображения и речи, сопровождая это мимикой и эмоциями реального человека.

«Цифровой двойник телеведущей» — это сложная разработка, которая состоит как из технологий, имеющихся на рынке, так и из уникальных, созданных в рамках проекта. Автоматическая генерация мимики является нетривиальной задачей, над решением которой удалось справиться лишь немногим компаниям в мире, сообщают в банке.

Елена является совместной разработкой Лаборатории робототехники Сбербанка и двух российских компаний: ЦРТ обеспечивает опытную систему синтеза речи на основе искусственных нейронных сетей, а компания CGF Innovation комбинирует методы искусственного интеллекта и инструменты создания фотореалистичной компьютерной графики.

Как утверждают в Сбербанке, новая разработка является уникальной и существенно опережает аналогичные решения, существующие на российском рынке.

«
Сейчас никого не удивить полностью виртуальными 3D-моделями, активно применяемыми в таких сферах, как кино и компьютерные игры. Уникальность Елены в том, что она позволяет полностью автоматизировать труд телеведущей: созданный журналистом текст можно оцифровать и получить конечный продукт — новостной сюжет — для трансляции зрителям, - отметил Лев Хасис, первый заместитель Председателя Правления Сбербанка.
»

Сфера применения данной технологии широка: корпоративные и массовые коммуникации, реклама, создание обучающих материалов, социальная работа с пенсионерами — вплоть до использования в бытовых устройствах. В Сбербанке предполагается применять робота для создания новостных выпусков и представления новостей на Сбербанк TV и их распространения, создания видеорекламы продуктов, услуг и товаров банка, компаний его экосистемы и заказчиков, а также для представления проектов, программ, достижений, планов, образовательных и обучающих программ, курсов Сбербанка и компаний Группы Сбербанк на форумах, выставках и других подобных мероприятиях.

Работа над проектом «Елена — цифровой двойник телеведущей» продолжается. Есть несколько направлений его развития: совершенствование качества мимики, добавление эмоций, движений, виртуальной студии, улучшение технических параметров — скорости и разрешения, создание двойников для автономной работы в устройствах.



ПРОЕКТЫ (1) ИНТЕГРАТОРЫ (1) СМ. ТАКЖЕ (2)


Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Promobot (Промобот) (31)
  Cognitive Pilot (Когнитив Роботикс) (14)
  Nvidia (Нвидиа) (11)
  Яндекс (Yandex) (11)
  Cognitive Technologies (Когнитивные технологии) (10)
  Другие (461)

  ABB Group (7)
  Promobot (Промобот) (4)
  АББ Россия (ABB) (3)
  Ростелеком (3)
  Cognitive Pilot (Когнитив Роботикс) (2)
  Другие (59)

  Mains Lab (Мэйнс Лаборатория) (2)
  Яндекс (Yandex) (2)
  Московский центр инновационных технологий в здравоохранении (2)
  Лаборатория знаний (1)
  СофтТелематика (1)
  Другие (46)

  Департамент информационных технологий Москвы (ДИТ) (3)
  Fora Robotics (Фора Роботикс) (2)
  Яндекс (Yandex) (2)
  Инфосистемы Джет (2)
  Яндекс.Облако (Yandex.Cloud) (2)
  Другие (46)

  Университет Иннополис (2)
  Группа компаний ЦРТ (Центр речевых технологий) (1)
  КиберСклад (1)
  Максимум, Maximum (ГБУ МО ЦРЦТ - Центр развития цифровых технологий) (1)
  Мобильные ТелеСистемы (МТС) (1)
  Другие (16)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Promobot (Промобот) (9, 32)
  ABB Group (8, 23)
  Cognitive Pilot (Когнитив Роботикс) (2, 21)
  Cognitive Technologies (Когнитивные технологии) (1, 21)
  Nvidia (Нвидиа) (3, 10)
  Другие (522, 133)

  ABB Group (2, 11)
  Promobot (Промобот) (2, 4)
  Cognitive Pilot (Когнитив Роботикс) (1, 2)
  Gaskar Group (Гаскар Интеграция) (1, 2)
  Ronavi Robotics, Ронави Роботикс (ранее Ронави логистические системы) (1, 2)
  Другие (10, 11)

  Транспорт будущего (2, 1)
  Бирюч-НТ Инновационный Центр (2, 1)
  Эфко ГК (2, 1)
  Smart Meal Service (Смарт Мил Сервис) (1, 1)
  YaCuAi (1, 1)
  Другие (13, 13)

  Fora Robotics (Фора Роботикс) (1, 2)
  Яндекс (Yandex) (1, 1)
  Aripix Robotics (Арипикс Роботикс) (1, 1)
  Rozum Robotics (Розум Роботикс) (1, 1)
  Роботех (Robotech) (1, 1)
  Другие (5, 5)

  КиберСклад (1, 1)
  Другие (0, 0)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Promobot - 26
  Cognitive Agro Pilot Система автоматического вождения - 21
  ABB IRB Промышленные роботы - 19
  Nvidia Drive AI-платформа для самоуправляемых автомобилей - 10
  Da Vinci (робот-хирург) - 9
  Другие 119

  ABB IRB Промышленные роботы - 8
  YuMi (Мобильный коллаборативный робот) - 4
  Promobot - 4
  Gaskar Group Hive Автономные дронопорты - 2
  Cognitive Agro Pilot Система автоматического вождения - 2
  Другие 11

  МИСиС и 3D Bioprinting Solutions: 3D-биопринтер в виде роборуки для применения в операционной in situ - 1
  Робот-врач Promobot - 1
  Визорлабс Видеопилот (VizorLabs Spotter) - 1
  Smart Meal Service: Lunch fastPass Робот-кассир - 1
  Cognitive Agro Pilot Система автоматического вождения - 1
  Другие 9

  For-1 Антропоморфный робот - 2
  Robotech: RP-серия Роботы-паллетайзеры - 1
  Dobot CR-серия Коллаборативные роботы - 1
  Яндекс: Складские роботы - 1
  Da Vinci (робот-хирург) - 1
  Другие 2

  Роботы КиберСклад - 1
  Другие 0

Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Группа компаний ЦРТ (Центр речевых технологий) (43)
  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (27)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (24)
  Naumen (Наумен консалтинг) (14)
  Voice Systems Robotics (VSR, VS Robotics) (9)
  Другие (148)

  Группа компаний ЦРТ (Центр речевых технологий) (5)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (4)
  Voice Systems Robotics (VSR, VS Robotics) (2)
  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (2)
  3iTech (ранее 3i Technologies) (2)
  Другие (15)

  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (12)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (7)
  Naumen (Наумен консалтинг) (3)
  Voice Systems Robotics (VSR, VS Robotics) (3)
  Мегапьютер Интелидженс (Megaputer Intelligence) (2)
  Другие (11)

  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (9)
  Группа компаний ЦРТ (Центр речевых технологий) (8)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (6)
  Naumen (Наумен консалтинг) (4)
  Unlimited Production (Анлимитед Продакшен) (4)
  Другие (18)

  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (2)
  SberDevices (СалютДевайсы, ранее СберДевайсы) (2)
  Группа компаний ЦРТ (Центр речевых технологий) (1)
  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (1)
  Наносемантика (Nanosemantics Lab) (1)
  Другие (7)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Группа компаний ЦРТ (Центр речевых технологий) (16, 46)
  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (3, 28)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (11, 26)
  Яндекс (Yandex) (9, 14)
  Avaya (4, 13)
  Другие (300, 144)

  Группа компаний ЦРТ (Центр речевых технологий) (2, 5)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (1, 5)
  SberDevices (СалютДевайсы, ранее СберДевайсы) (2, 2)
  3iTech (ранее 3i Technologies) (1, 2)
  Naumen (Наумен консалтинг) (1, 2)
  Другие (7, 9)

  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (2, 12)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (2, 7)
  Naumen (Наумен консалтинг) (1, 3)
  Voice Systems Robotics (VSR, VS Robotics) (1, 3)
  Voximplant (Фастком) (2, 2)
  Другие (9, 11)

  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (1, 9)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (2, 8)
  Группа компаний ЦРТ (Центр речевых технологий) (4, 7)
  Unlimited Production (Анлимитед Продакшен) (1, 6)
  Naumen (Наумен консалтинг) (2, 4)
  Другие (12, 13)

  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (2, 3)
  SberDevices (СалютДевайсы, ранее СберДевайсы) (2, 2)
  Naumen (Наумен консалтинг) (1, 1)
  Voice Systems Robotics (VSR, VS Robotics) (1, 1)
  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (1, 1)
  Другие (6, 6)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  МТТ VoiceBox - 24
  BSS Digital2Speech - 20
  Voice2Med Система распознавания речи в медицине - 14
  SmartLogger II - 12
  Naumen Erudite - 12
  Другие 159

  BSS Digital2Speech - 5
  Voice2Med Система распознавания речи в медицине - 4
  МТТ VoiceBox - 2
  Neuro.net Голосовой робот - 2
  3i TouchPoint Analytics - 2
  Другие 9

  МТТ VoiceBox - 11
  BSS Digital2Speech - 6
  VS Robotics: VS Робот-оператор - 3
  Naumen Erudite - 3
  VoxImplant - 2
  Другие 12

  МТТ VoiceBox - 9
  BSS Digital2Speech - 7
  EXpress Защищенный корпоративный мессенджер - 6
  SmartLogger II - 4
  Naumen Erudite - 3
  Другие 17

  BSS Digital2Speech - 2
  SmartLogger II - 1
  Naumen Erudite - 1
  BSS и Ростелеком: Виртуальный голосовой ассистент - 1
  Сбер Салют Виртуальные ассистенты - 1
  Другие 7