Газпром-Медиа Холдинг: Video Tagging System

Продукт
Название базовой системы (платформы): Искусственный интеллект (ИИ, Artificial intelligence, AI)
Разработчики: Пятница, ГПМ Дата
Дата премьеры системы: 2023/04/05
Технологии: ИБ - Биометрическая идентификация,  Речевые технологии,  Системы видеоаналитики

Основные статьи:

2023: Запуск сервиса

«Газпром-Медиа Холдинг» 5 апреля 2023 года сообщил о запуске сервиса автоматического распознавания и тегирования видеоконтента Video Tagging System. Он разработан телеканалом «Пятница!» и компанией «ГПМ Дата» — единым центром управления большими данными активов «Газпром-Медиа Холдинга».

Video Tagging System создан на основе технологий компьютерного зрения (Computer Vision) и нейронных сетей. Сервис помогает распознавать лица, речь (распознавание речи выполняется с использованием технологий Tinkoff Voice Kit), надписи и количество персон в кадре, движения людей, выполнять детекцию животных и предметов; классифицировать кинематографические планы, считывать начало заставок и титров и определять преобладающую палитру сцены.

Все это позволяет ускорить поиск нужных кадров для производства промо-материалов и запуска контекстной видеорекламы. Продукт автоматизирует поиск подходящих сцен, модерацию, субтитрование и аналитику содержания видеоконтента. Система способна выполнять автоматическую разметку самых релевантных моментов для показа рекламных роликов (мидролов), а также размечать логические паузы в многосерийном контенте.Российский рынок СЭД/ECM борется с демпингом и рассчитывает на возможности искусственного интеллекта. Обзор и рейтинг TAdviser 201.2 т

Первыми пользователями сервиса стали телеканалы «Пятница!» и «Суббота!», а также онлайн-кинотеатр PREMIER. В результате использования системы VTS время подбора видеоматериалов для создания промо-роликов сократилось более чем в 20 раз, а время субтитрования контента — в 4 раза. Применение VTS снижает трудозатраты при работе с контентом и дает возможность пользователям перераспределить ресурсы с рутинных операций на творческие задачи.

Телеканал «Пятница!» активно использует технологию для создания промо-роликов.

«
Несколько лет назад коллеги из «ГПМ Дата» показали нам возможности работы нейросетей, и возникла идея применить эти чудеса для решения оперативных бизнес-задач «Пятницы!». Как минимум — автоматизировать и ускорить работу промо-продюсеров. В результате совместных усилий появился сервис VTS. Партнером для дистрибуции и хранения видео, а также демонстрации возможностей контекстной видеорекламы стала видеоплатформа UMA. На апрель 2023 года VTS осуществляет поиск по видеоархиву из 3000 часов контента. С помощью данного сервиса промо-продюсеры тратят на поиск видеофрагментов пару минут, а раньше на такую работу уходили недели,
сказал Максим Русаков, руководитель интернет-проектов «Пятницы!».
»

В марте 2023 года телеканал «Суббота!» первым протестировал технологию в контекстной видеорекламе. Реклама кондитерского шоу с Клавой Кокой «Здравствуй, Сладкий» была интегрирована внутрь шоу «Кондитер» на «Пятнице!». Реклама автоматически появлялась в эфире после слов «сладкий» и «пробовать». Так во время просмотра зрители «Пятницы!» видели релевантное промо другого кондитерского проекта.

«
Мы постоянно расширяем портфель наших цифровых продуктов для «Газпром-Медиа Холдинга» и рекламодателей. Решения на основе технологий компьютерного зрения и искусственного интеллекта обладают высоким потенциалом в оптимизации работы с медиаконтентом и в ходе настройки нативных рекламных коммуникаций для онлайн-видео. Спрос на такие разработки будет расти не только внутри «Газпром-Медиа Холдинга», но и со стороны внешних клиентов,
отметила Светлана Лапунова, управляющий директор «ГПМ Дата».
»

«
PREMIER уже использует технологию субтитрирования, которую предлагает система VTS. Это помогает оптимизировать работу по подготовке промо-материалов, а также адаптировать контент для слабослышащих зрителей. У PREMIER большие амбиции по развитию технологий сервиса, поэтому мы планируем активнее внедрять работу новой системы и тестировать ее возможности в рамках работы с контентом,
отметил Сергей Стамболцян, генеральный директор PREMIER.
»



Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Биолинк Солюшенс (BioLink Solutions) (134)
  Прософт Биометрикс (ProSoft Biometrics) (74)
  Индид, Indeed (ранее Indeed ID) (44)
  VisionLabs (ВижнЛабс) (34)
  Группа компаний ЦРТ (Центр речевых технологий) (30)
  Другие (448)

  Прософт Биометрикс (ProSoft Biometrics) (11)
  VisionLabs (ВижнЛабс) (7)
  Группа компаний ЦРТ (Центр речевых технологий) (5)
  РекФэйсис (4)
  Талмер (Talmer) (4)
  Другие (55)

  Индид, Indeed (ранее Indeed ID) (6)
  Goodt (Гудт) (2)
  NDBC - ЭнДиБиСи (ранее НТТ ДАТА Бизнес Солюшнс, itelligence Россия, Ителлидженс) (2)
  VisionLabs (ВижнЛабс) (2)
  ВидеоМатрикс (Videomatrix) (2)
  Другие (21)

  Индид, Indeed (ранее Indeed ID) (7)
  Сбербанк (7)
  Сканпорт АйДи (Scanport) (6)
  VisionLabs (ВижнЛабс) (4)
  АйТи Бастион (3)
  Другие (16)

  Сбербанк (2)
  Voca-Tech (Вока-Тек) (1)
  ОКТРОН (1)
  САТЕЛ (1)
  Сканпорт АйДи (Scanport) (1)
  Другие (0)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Биолинк Солюшенс (BioLink Solutions) (9, 140)
  Прософт Биометрикс (ProSoft Biometrics) (18, 84)
  VisionLabs (ВижнЛабс) (26, 50)
  Индид, Indeed (ранее Indeed ID) (1, 44)
  Группа компаний ЦРТ (Центр речевых технологий) (14, 38)
  Другие (360, 323)

  Прософт Биометрикс (ProSoft Biometrics) (7, 11)
  VisionLabs (ВижнЛабс) (2, 8)
  Группа компаний ЦРТ (Центр речевых технологий) (2, 6)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (1, 5)
  РекФэйсис (2, 4)
  Другие (27, 36)

  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (1, 6)
  Индид, Indeed (ранее Indeed ID) (1, 6)
  ABC Solutions (Эй Би Си Солюшенс) (1, 3)
  Goodt (1, 3)
  VisionLabs (ВижнЛабс) (2, 2)
  Другие (10, 11)

  Сбербанк (3, 8)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (1, 7)
  Индид, Indeed (ранее Indeed ID) (1, 7)
  VisionLabs (ВижнЛабс) (3, 6)
  Shenzhen Chainway Information Technology (1, 6)
  Другие (7, 9)

  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (1, 2)
  Сбербанк (1, 2)
  Voca-Tech (Вока-Тек) (1, 1)
  Shenzhen Chainway Information Technology (1, 1)
  Другие (0, 0)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  BioLink BioTime - 123
  BioLink FingerPass - 45
  Indeed Access Manager (Indeed AM) - 44
  Biosmart Studio - 36
  СКУД BioSmart - 27
  Другие 445

  VisionLabs Luna - 5
  VisionLabs Thermo (ранее VisionLabs Termo) - 5
  BSS Digital2Speech - 5
  Voice2Med Система распознавания речи в медицине - 4
  Biosmart Studio - 4
  Другие 47

  Indeed Access Manager (Indeed AM) - 6
  BSS Digital2Speech - 6
  Goodt (Ранее ZoZo RCAM, Revenue&Costs Assurance Management) - 3
  Vmx SILA: HSE - 2
  КриптоБиоКабина (КБК) - 1
  Другие 10

  BSS Digital2Speech - 7
  Indeed Access Manager (Indeed AM) - 7
  Shenzhen Chainway C-серия RFID-считывателей - 6
  Сбербанк: Система оплаты по улыбке - 5
  АйТи Бастион: СКДПУ НТ Система контроля действий поставщиков ИТ-услуг - 3
  Другие 11

  BSS Digital2Speech - 2
  Сбербанк: Система оплаты по улыбке - 2
  Shenzhen Chainway C-серия RFID-считывателей - 1
  Voca Tech: Система автоматизированного контроля сотрудников для выполнения стандартов обслуживания - 1
  Другие 0

Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  VizorLabs (Визорлабс) (41)
  Вокорд (Vocord) (39)
  ВидеоМатрикс (Videomatrix) (32)
  VisionLabs (ВижнЛабс) (25)
  Simetra (ранее А+С Транспроект) (18)
  Другие (319)

  ВидеоМатрикс (Videomatrix) (9)
  Simetra (ранее А+С Транспроект) (6)
  VisionLabs (ВижнЛабс) (5)
  VizorLabs (Визорлабс) (5)
  Талмер (Talmer) (4)
  Другие (49)

  VizorLabs (Визорлабс) (11)
  ВидеоМатрикс (Videomatrix) (8)
  Nord Clan (Норд Клан) (4)
  Джей Эс Эй Групп (JSA Group) (3)
  VisionLabs (ВижнЛабс) (2)
  Другие (30)

  VizorLabs (Визорлабс) (13)
  Ростелеком (3)
  VisionLabs (ВижнЛабс) (3)
  Транс-Телематика (3)
  Урбантех (3)
  Другие (33)

  VizorLabs (Визорлабс) (2)
  Университет Иннополис (1)
  ЭЛВИС-НеоТек (1)
  KAMAZ Digital (ЦП КАМАЗ) (1)
  Metrarobotics (Метрароботикс) (1)
  Другие (9)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Вокорд (Vocord) (9, 45)
  VizorLabs (Визорлабс) (9, 40)
  ВидеоМатрикс (Videomatrix) (17, 32)
  VisionLabs (ВижнЛабс) (13, 32)
  PTV Group (2, 25)
  Другие (331, 180)

  ВидеоМатрикс (Videomatrix) (9, 9)
  VisionLabs (ВижнЛабс) (3, 9)
  PTV Group (1, 6)
  Ростелеком (3, 5)
  VizorLabs (Визорлабс) (2, 5)
  Другие (14, 21)

  VizorLabs (Визорлабс) (7, 11)
  ВидеоМатрикс (Videomatrix) (7, 8)
  VisionLabs (ВижнЛабс) (2, 2)
  Nord Clan (Норд Клан) (1, 2)
  Випакс (Vipaks) (1, 1)
  Другие (16, 16)

  VizorLabs (Визорлабс) (4, 13)
  Технологии безопасности дорожного движения (ТБДД) (1, 3)
  Nord Clan (Норд Клан) (1, 2)
  Softlogic (Софтлоджик Рус) (1, 2)
  VisionLabs (ВижнЛабс) (1, 2)
  Другие (13, 14)

  NVI Research (1, 1)
  Softline (Софтлайн) (1, 1)
  Российская ассоциация экспертов рынка ритейла (1, 1)
  Трэктис (1, 1)
  PTV Group (1, 1)
  Другие (3, 3)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  PTV Visum - 25
  VisionLabs Luna - 24
  Визорлабс Контроль ОТ и ПБ (VizorLabs Health & Safety) - 24
  Vocord Traffic - 16
  ЦРТ: Визирь - 14
  Другие 249

  PTV Visum - 6
  VisionLabs Thermo (ранее VisionLabs Termo) - 5
  VisionLabs Luna - 5
  Визорлабс Контроль ОТ и ПБ (VizorLabs Health & Safety) - 4
  Ростелеком: Умный дом Видеонаблюдение - 3
  Другие 33

  Визорлабс Контроль ОТ и ПБ (VizorLabs Health & Safety) - 6
  Nord Clan: RDetector - 2
  Vmx SILA: HSE - 2
  Визорлабс Видеопилот (VizorLabs Spotter) - 1
  N3.Аналитика - 1
  Другие 28

  Визорлабс Контроль ОТ и ПБ (VizorLabs Health & Safety) - 9
  ТБДД: Азимут Комплексы фотовидеофиксации - 3
  Vizorlabs Платформенное решение видеоаналитики - 2
  Softlogic: SC-iMVS-RM3 Автокомплекс нейросетевого наблюдения для контроля объектов дорожной инфраструктуры - 2
  Nord Clan: ML Sense - 2
  Другие 17

  Softline Digital: RozniTech Платформа для сетевого ритейла (ранее Retailix.Ai) - 1
  Orwell 2k - 1
  Визорлабс Контроль ОТ и ПБ (VizorLabs Health & Safety) - 1
  NVI Solutions: owl.Guard - 1
  PTV Visum - 1
  Другие 1