Недавно компания Adobe представила новую версию своего популярного графического редактора Photoshop.
Среди различных дополнений была также отмечена новая функция Super Resolution («Суперразрешение» в русскоязычной версии) для плагина Adobe Camera Raw 13.2 (ACR).
Для справки, Adobe Camera Raw — это плагин (используется вместе с Photoshop), предназначенный для работы с RAW-файлами фотокамер. Он преобразовывает RAW-файлы в Jpeg (или другие форматы) и имеет широкий набор инструментов для промежуточной обработки фото.
По возможностям работы с RAW-файлами Adobe Camera Raw (ACR) очень похож на Adobe Lightroom.
По информации в официальном блоге Adobe, Super Resolution скоро появится и в Lightroom.
Что дает использование «Суперразрешения»?
Функция Super Resolution предназначена для повышения четкости (детализации) изображения при печати в крупном формате или после обрезки (crop). В русскоязычной версии называется «Суперразрешение».
Судя по всему, неплохих результатов можно довиться и «улучшая» RAW-снимки сравнительно невысокого разрешения устаревших камер.
При использовании Super Resolution линейный размер изображения увеличивается вдвое по вертикали и горизонтали. Итоговое разрешение файла вырастает в четыре раза.
По задумке разработчика этот метод дает заметно более качественный результат по сравнению с обычным увеличением (upscale) в Photoshop методом bicubic resampling.
Как можно догадаться, учитывая современные тренды, функция Super Resolution базируется на технологии машинного обучения (machine learning), которая является одним из направлений искусственного интеллекта.
Модель машинного обучения была «натренирована» миллионами пар снимков с низким и высоким разрешениями, что дает возможность системе «понимать» как надо увеличивать изображения.
Подобный метод «улучшения» фото на базе машинного обучения сегодня довольно популярный и задействуется в различных отдельных приложений, онлайн-сервисах и т. 
д.
Разработчик четко описал с какими файлами функция Super Resolution работать не будет:
- Файлы не формата Raw (JPEG, TIFF и HEIC);
- Линейные изображения DNG (включая HDR и панорамные изображения DNG, ранее созданные в Lightroom или Camera Raw);
- Файлы Proxy DNG и Smart Preview;
- Монохромные файлы Raw;
- Фотографии, сделанные на четырехцветную камеру;
- Фотографии, сделанные на камеру с матрицей Foveon;
- Фотографии, сделанные на камеру Fujifilm с мозаичной матрицей SR, EXR или 2×4;
- Файлы Canon S-RAW/M-RAW;
- Файлы Raw Nikon небольшого размера;
- Файлы Pentax Pixel Shift Resolution (PSR);
- Файлы Sony ARQ.
Как это работает на практике?
В плагине Adobe Camera Raw нажимаем правую кнопку мышки на обрабатываемом RAW-фото и выбираем Enhance («Улучшить»).
Появляется окно с возможностью активации функции Super Resolution («Суперразрешение»).
Нажимая на изображение в разных частях можно видеть результат в окне предпросмотра.
После подтверждения появляется отдельный новый DNG-файл с приставкой Enhanced в той же папке, что и обрабатываемый файл.
Этот созданный DNG-файл имеет увеличенное в четыре раза разрешение по сравнению с оригиналом и заметно выросший объем.
По информации от Adobe, функция «Суперразрешение» очень активно использует вычислительные ресурсы графического процессора (GPU) видеокарты и желательно, чтоб в вашем компьютере был соответствующий графический адаптер. Как заявляется, разница во времени обработки может быть очень существенной. Речь о нескольких секундах против нескольких минут при работе с одним файлом!
В нашем случае при использовании видеокарты NVIDIA GeForce RTX 3060 время обработки составляло примерно одну-две секунды (для одного файла) и увеличилось до пяти секунд при использовании NVIDIA GeForce GTX 1070.
Хороший результат?
На парных изображениях в 100-процентном масштабе можно сравнить участок оригинального снимка с «обычным» увеличением в Photoshop методом bicubic (верхняя часть) и преобразованный участок снимка с применением Super Resolution.
1.
2.
3.
4.
5.
Поэкспериментировав с функцией Super Resolution, могу сделать несколько выводов.
Эффект от применения есть, но я бы его охарактеризовал как умеренный. Какого-то большого чуда и разницы «как небо и земля» ждать точно не стоит.
Результат работы Super Resolution сильно зависит от объектов на изображении. На кирпичной кладке, черепице крыш, каких-то металлоконструкция, объектах с множеством толстых и тонких линий эффект получается достойным.
Иногда очень неплохо улучшается читаемость надписей.
Если говорить о человеческих лицах в кадре, далеко не всегда Super Resolution дает какой-то положительный эффект.
А порой можно заметить появление различных артефактов. «Суперразрешение» может усилить муар или хроматические аберрации в кадре.
Подытоживая отмечу, что Super Resolution — это, скорее, дополнительный новый весьма любопытный инструмент, который может дать преимущество, но далеко не всегда.
Применять его при пакетной обработке сразу для серии снимков я бы точно не рекомендовал.
Предполагаю также, что эффективность Super Resolution может быть со временем улучшена. Ведь технологии машинного обучения сегодня в тренде и постоянно развиваются.
