Цифровой двойник редактора пишет биографии и обрабатывает фото киноактеров для Wink
Цифровой двойник редактора быстро заполняет ранее пустовавшие ячейки на страницах фильмов и сериалов в видеосервисе «Ростелекома» Wink. Агент-редактор повышает качество пользовательского опыта, релевантность поисковой выдачи и эффективность рекомендательной системы.
В библиотеке онлайн-кинотеатра Wink свыше 80 тыс. наименований различного видеоконтента, созданного в разных странах и в разное время — от черно-белых кинофильмов до современных блокбастеров и сериалов. Если по новинкам каталога вся нужная информация вносится в карточку контента своевременно, то данные о тысячах фильмов, вышедших 15–20 и более лет назад, нередко бывает неполной.
Когда пользователь открывает страницу фильма или сериала в Wink, он видит не просто список имен, а качественные, единообразно оформленные фотографии съемочной группы, а также биографии и фильмографию актеров, режиссеров, продюсеров и других участников процесса. Это помогает быстрее ориентироваться в каталоге, узнавать любимых актеров или режиссеров и находить новый интересный контент.
Олег Никитин, директор по технологиям и продуктам онлайн-кинотеатра Wink:
«Для создания ИИ-редактора мы использовали самые продвинутые решения по обработке разрозненных данных и изображений. Иногда в работу попадают снимки очень плохого качества: сделанные в неподходящей обстановке, с прищуром или в солнцезащитных очках, с размытыми из-за движения очертаниями, посторонними людьми или предметами в кадре, иногда это просто кадры с кинопленок. Наши технологии умеют проводить слепую реставрацию лица на базе 68 контрольных координат, которые попиксельно дорабатывают снимок до нужных параметров — крупное лицо, нейтральный фон, без очков и дефектов или артефактов съемки. Мы разработали собственный алгоритм обработки естественного языка, который досконально проверяет, что на фото именно актер Иванов, а не другой человек с аналогичным ФИО. Точно такую же многоступенчатую проверку проходит биография персоны, в которой остаются только подтвержденные из нескольких доверенных источников данные и которая пишется по редакционному стандарту Wink. Все эти шаги повышают качество цифрового опыта для наших клиентов».
Весь процесс рассчитан на работу ИИ-редактора без участия человека. Агент обучен проводить полный цикл работы с фотографиями и текстами — от поиска до финишной обработки для публикации на странице контента:
- интеллектуальный поиск: агент обращается к нескольким открытым источникам, подтверждая соответствие найденного изображения конкретному человеку по совокупности данных (ФИО, дата рождения, профессия, фильмография);
- ранжирование и отбор: каждая найденная фотография проходит оценку релевантности (степень совпадения изображения, приоритетность источника) и из них формируется список лучших кадров для обработки;
- обработка с помощью компьютерного зрения: выравнивание лица по линии глаз, масштабирование, центровка, нормализация фона, сглаживание артефактов; при необходимости применяется интеллектуальный апскейл до четырехкратного увеличения разрешения;
- автоматический контроль качества: обработанное изображение проходит многоступенчатую проверку и получает оценку (при низкой оценке фото отбраковывается);
- самокоррекция: если первые обработанные изображения не проходят контроль качества, агент не останавливается — он берет в работу следующую группу фотографий, повторяет цикл обработки и при необходимости применяет дополнительные инструменты (удаление проблемных элементов, нормализация фона, апскейл) и проходит повторную проверку.