Мы только успели привыкнуть к современному стандарту качества Full HD, а теперь 4K это норма. Но как же быть со старыми фильмами? Их можно улучшить при помощи технологии upscale video. Расскажем о ней подробнее.

Вам уже встречались программы под названием smart upscale? Это технология, позволяющая повысить качество видео. Она работает на основе искусственного интеллекта. Для upscale online обучают специальные нейросети, которые способны переводить видеоизображение из меньшего разрешения в большее.

Специалисты веб-услуг и разработки в YuSMP Group активно применяют их в своей работе и готовы поделиться своими знаниями.

Кто занимается upscale video

Есть несколько программ, которые используют для ремастеринга. Этот процесс полностью автоматизирован, потому что улучшать видео приходится покадрово.

То есть делать это ручным способом невозможно из-за трудоемкости процесса. Для повышения качества необходимо увеличить количество пикселей в каждом кадре, обращая особое внимание на границы объектов.

Апскейл позволяет перевести фильмы из качества full hd в 4K это популярная задача для стриминговых платформ. Ею занимается Netflix, выкупающий права на трансляцию старого контента, а в России такой продукт есть у IVI.

Как выглядит процесс обучения

Для аскейла пишут программы. Их первые образцы умели адаптировать видеофайлы под разные форматы и платформы. Сейчас, благодаря развитию технологий, они научились работать и с улучшением качества.

Обучение таких систем проходит следующим образом. Берут исходный файл с качеством full hd или 4К и искусственно ухудшают его. На основе двух вариантов одного видео нейросеть обучают менять разрешение.

Процесс работы выглядит так:

• сотрудник выбирает формат видео;
• запускает контейнер;
• нейросеть проводит процедуру upscale online;
• новый файл записывается на сервер.

Плюсы и минусы smart upscale

Основное преимущество очевидно — экономическая эффективность. Ручной апскейл все еще применяется, но обработать большое количество контента таким образом не получится. В проектах, которые мы создали, нейросети применяются схожим образом — чтобы оптимизировать процессы.

Недостатки у технологии тоже присутствуют. Нейросети хорошо показывают себя с переводом видео качества full hd в 4K. Здесь при слепом тестировании выявить обработанный файл смогли только профессионалы.

Обычные пользователи нее увидели никаких помех. Они же не отличили видео, изначально снятое в 4К, от ухудшенного и потом восстановленного нейросетью.

Но возможности алгоритмов не безграничны, когда речь идет об оцифрованных видеозаписях. В старых фильмах upscale video сталкивается с проблемами. Дефекты аналоговой пленки, устранимы при ручной обработке, но критичны для нейросети. При автоматическом апскейле они становятся еще более видимыми.

Сейчас создают алгоритмы, которые обучают поиску таких дефектов. Работают они по тому же принципу. Берут качественную видеозапись, искусственно создают дефекты, а затем два видеофрагмента используют для обучения нейросети.

Но пока что впечатляющих результатов на этом направлении нет. Так что для обработки фильмов 90-х годов и старше по-прежнему нужны люди. Они занимаются модерацией автоматически обработанных фрагментов видео.

Больше интересных статей об алгоритмах и нейросетях в блоге студии web-разработки YuSMP Group.