Новый сайт Let’s Enhance на базе нейросетей повышает разрешение и воссоздает детали загружаемого изображения. Особенно хорошо программа справляется с городскими пейзажами и фотографиями животных. Обзор опубликовал портал PetaPixel.

Разработчики часто используют нейросети и машинное обучение для работы с фотографиями. Специальные алгоритмы позволяют убрать шум, «додумать» некоторые детали снимка и даже деформировать уже присутствующие на нем объекты. Кроме того, нейросети также используются для улучшения качества изображения — однако очень часто такие программы недоступны для обычных пользователей, которые не обладают навыками программирования.

Снимок после обработки новой программой. Pixabay

Программисты Алекс Савсуненко (Alex Savsunenko) и Владислав Пранскевичиус (Vladislav Pranskevičius) создали простой в использовании сайт. Чтобы улучшить качество снимка, достаточно перетащить изображение на середину страницы. Дальше алгоритм убирает все артефакты, масштабирует изображение, увеличивая в 4 раза, и также дорисосывает новые детали на снимке. Время ожидания при этом составляет всего несколько минут.

Фотография до обработки. Pixabay

Фотография после обработки. Pixabay

Фотография до обработки. Никита Скляревский

Фотография после обработки. Никита Скляревский

Результаты обработки, в целом, выглядят хорошо, лучше всего программа справляется с фотографиями животных и зданий. Пока что нейросети определенно не дается работа с портретами — лица людей выглядят нарисованными. Кроме того, у алгоритма возникают трудности при обработке мелких деталей.

Фотография до обработки. Pixabay

Фотография после обработки. Pixabay

Фотография до обработки

Фотография после обработки

Программисты рассказали, что их система вдохновлена нейросетями SRGAN и EDSR. Они использовали большое количество обучающего материала, 10 процентов которого составили фотографии лиц. В будущем исследователи надеются создать отдельные нейросети для каждого типа изображения. Сначала программа будет определять, что изображено на снимке, а потом применять нужные инструменты.

Нейросети также умеют заметно трансформировать снимки. Так, французский разработчик Григорий Антипов создал нейросеть, которая может реалистично изменять возраст изображенного на фотографии человека. Похожую, но реализованную существенно проще функцию недавно предоставляет приложение FaceApp.

Автор: Кристина Уласович