«Газпром-Медиа Холдинг» разработал сервис автоматического распознавания и тегирования видеоконтента Video Tagging System
«Газпром‑Медиа Холдинг» заявил о запуске сервиса автоматического распознавания и тегирования видеоконтента Video Tagging System, рассказали информационной службе Хабра в пресс‑службе холдинга. Сервис разработан телеканалом «Пятница» и компанией «ГПМ Дата». «ГПМ Дата» представляет собой единый центр управления большими данными активов «Газпром‑Медиа Холдинга».
Новый сервис Video Tagging System (VTS) разработан на основе технологий компьютерного зрения (Computer Vision), нейронных сетей и технологии распознавания речи Tinkoff VoiceKit. Сервис распознаёт лица, речь, надписи, количество персон в кадре, движения людей, определяет животных и предметов, а также классифицирует кинематографические планы, считывает начало заставок, титров и определяет преобладающую палитру сцены. Телеканал «Пятница» активно использует технологию для создания промороликов.
Максим Русаков руководитель интернет-проектов телеканала «Пятница»
«Несколько лет назад коллеги из «ГПМ Дата» показали нам возможности работы нейросетей, и возникла идея применить эти чудеса для решения оперативных бизнес‑задач «Пятницы!». Как минимум — автоматизировать и ускорить работу промопродюсеров. В результате совместных усилий появился сервис VTS. Партнёром для дистрибуции и хранения видео, а также демонстрации возможностей контекстной видеорекламы стала видеоплатформа UMA. Сейчас VTS осуществляет поиск по видеоархиву из 3 тысяч часов контента. С помощью нового сервиса промопродюсеры тратят на поиск видеофрагментов пару минут, а раньше на такую работу уходили недели».
По словам разработчиков, система выполняет автоматическую разметку самых релевантных моментов для показа рекламных роликов (мидролов) и размечает логические паузы в многосерийном контенте. Сервис автоматизирует поиск подходящих сцен, модерацию, субтитрование и аналитику содержания видеоконтента. Систему используют не только телеканал «Пятница», но и телеканал «Суббота», а также онлайн‑кинотеатр PREMIER.
Сергей Стамболцян Генеральный директор PREMIER
«PREMIER уже использует технологию субтитрирования, которую предлагает система VTS. Это помогает оптимизировать работу по подготовке промоматериалов, а также адаптировать контент для слабослышащих зрителей. У PREMIER большие амбиции по развитию технологий сервиса, поэтому мы планируем активнее внедрять работу новой системы и тестировать её возможности в рамках работы с контентом».
