Нейросеть YandexART научилась восстанавливать архивные видеозаписи и кинохронику, сообщили в пресс-службе «Яндекса».
Это решение может быть полезно кинокомпаниям, музеям, историкам и прочим профессионалам для улучшения качества означаемых видео и работы с историческим наследством, отметили в компании.
Например, нейросеть уже восстановила видеохронику из материалов «Мосфильма» и Российского государственного архива кинофотодокументов для нового сериала «Кинопоиска» о подготовке и организации Олимпиады-80.
«Благодаря YandexART события сорокалетней давности стали доступны современному зрителю в превосходном качестве. Нейросеть помогла добавить на размытый и нечеткий кадр фактуру и недостающие детали. Например, она прорисовала кирпичную кладку на стенах и орнаменты на женском платье, а у машины восстановила фары и поворотники, которые было плохо видно. Также нейросеть увеличила разрешение и резкость и повысила качество видеокадров», - рассказали в компании.
Нейросеть закопалась в исторических архивах
Разработчики «Яндекса» выучили модель не «галлюцинировать», то бишь не выдумывать то, чего изначально не было. YandexART теперь умеет превращать шумные, размытые и крепко сжатые кадры в контент с высокой детализацией объектов и текстур благодаря поэтапному обучению на материалах невысокого качества.
Над реставрацией архивных видео за счет нейросетевых технологий и компьютерной графики работали команды компьютерного зрения «Яндекса», Yandex Research и «Плюс Студии».
Среди восстановленных кадров зрители смогут увидеть, например, хронику со спортсменами, участвовавшими в Олимпиаде-80, улицы Москвы тех лет, любительские съемки, материалы прессы и те архивы. Отреставрированную видеохронику использовали в драме «Забавы» про Олимпиаду-80. Премьера сериала состоится на «Кинопоиске» 3 августа.
Yandex AI Rendering Technology (YandexART) - диффузионная нейросеть, которая создает и улучшает изображения и анимацию, а также обрабатывает загруженные фотографии в ответ на текстовые запросы.
Фото: пресс-служба «Яндекса»