Протестируйте новую функцию сверхвысокого разрешения в Adobe Camera Raw

Представляя следующую версию приложения Adobe Photoshop, разработчик также упомянул новую функцию Super Resolution в плагине Camera Raw для редактирования фотографий. Что оно делает? — hi-Tech.ua

Тестируем новую функцию Super Resolution в Adobe Camera Raw

Adobe недавно представила новую версию своего популярного графического редактора Photoshop.

Среди различных дополнений есть также новая функция Super Resolution для плагина Adobe Camera Raw 13.2 (ACR).

Для справки: Adobe Camera Raw — это подключаемый модуль (используемый с Photoshop) для работы с файлами RAW камеры. Он конвертирует файлы RAW в Jpeg (или другие форматы) и имеет широкий набор инструментов для промежуточной обработки фотографий.

По возможности работы с файлами RAW Adobe Camera Raw (ACR) очень похож на Adobe Lightroom.

Согласно официальному блогу Adobe, Super Resolution скоро появится в Lightroom.

Что дает использование «Суперразрешения»?

Функция Super Resolution предназначена для улучшения резкости (детализации) изображения при печати в большом формате или после обрезки. В русской версии это называется «Сверхразрешение».

Судя по всему, хороших результатов можно добиться, «улучшая» изображения в формате RAW при относительно низком разрешении устаревших камер.

При использовании сверхвысокого разрешения линейный размер изображения удваивается по вертикали и горизонтали. Разрешение полученного файла увеличивается в четыре раза.

По задумке разработчика, этот метод обеспечивает заметно лучший результат, чем обычное масштабирование в Photoshop с использованием метода бикубической передискретизации.

Как вы понимаете, с учетом текущих тенденций функция сверхвысокого разрешения основана на технологии машинного обучения, которая является одной из областей искусственного интеллекта.

Модель машинного обучения была «обучена» миллионами пар изображений с низким и высоким разрешением, что позволило системе «понять», как увеличивать изображения.

Этот основанный на машинном обучении метод «улучшения» фотографии очень популярен сегодня и используется в различных индивидуальных приложениях, онлайн-сервисах и т.д.

Разработчик четко описал, с какими файлами функция Super Resolution не работает:

• Файлы не Raw (JPEG, TIFF и HEIC);
• Линейные изображения DNG (включая панорамные изображения HDR и DNG, ранее созданные в Lightroom или Camera Raw);
• Прокси-файл DNG и Smart Preview;
• Монохромные необработанные файлы;
• Фотографии, сделанные четырехцветной камерой;
• Фотографии, сделанные с помощью сенсорной камеры Foveon;
• Фотографии, сделанные камерой Fujifilm с мозаичным сенсором SR, EXR или 2 × 4;
• Файлы Canon S-RAW / M-RAW;
• Маленькие файлы Nikon Raw;
• Файл Pentax Pixel Shift Resolution (PSR);
• Файлы Sony ARQ.

Как это работает на практике?

В подключаемом модуле Adobe Camera Raw щелкните обработанную фотографию RAW правой кнопкой мыши и выберите «Улучшить»).

Появится окно с возможностью активировать функцию сверхвысокого разрешения»).

Нажимая на изображение в разных частях, вы можете увидеть результат в окне предварительного просмотра.

После подтверждения новый отдельный файл DNG с расширенным префиксом появится в той же папке, что и обрабатываемый файл.

Этот сгенерированный файл DNG в четыре раза превышает разрешение оригинала и значительно увеличен в размере.

Согласно Adobe, функция Super Resolution очень активно использует ресурсы обработки графического процессора (GPU) видеокарты, и желательно, чтобы компьютер имел соответствующий графический адаптер. Как уже говорилось, разница во времени обработки может быть очень значительной. Это секунды против нескольких минут при работе с файлом!

В нашем случае при использовании видеокарты NVIDIA GeForce RTX 3060 время обработки составляло примерно одну-две секунды (для файла) и увеличивалось до пяти секунд при использовании NVIDIA GeForce GTX 1070.

Хороший результат?

На изображениях со 100% -ным масштабом вы можете сравнить часть исходного изображения с «нормальным» увеличением Photoshop, используя бикубический метод (вверху), и преобразованную часть изображения, используя суперразрешение.

Поэкспериментировав с функцией Super Resolution, могу сделать несколько выводов.

Эффект от приложения есть, но я бы охарактеризовал его как умеренный. Совершенно не стоит ждать какого-то великого чуда и разницы «как небо и земля.

Результат сверхвысокого разрешения сильно зависит от объектов на изображении. На кирпиче, плитке, какой-то металлической конструкции, предметах с большим количеством толстых и тонких линий эффект достойный.

Иногда читаемость надписей улучшалась очень хорошо.

Если мы говорим о человеческих лицах в кадре, то сверхвысокое разрешение не всегда дает положительный эффект.

А иногда можно увидеть, как выглядят различные артефакты. Суперразрешение может усилить муар или хроматическую аберрацию в кадре.

Стрелка указывает пример появления артефактов при использовании Суперразрешения

Подводя итог, я заметил, что суперразрешение — это, скорее, еще один новый инструмент, очень интересный, который может дать преимущество, но не всегда.

Я бы определенно не рекомендовал использовать его для пакетной обработки серии изображений одновременно.

Я также предполагаю, что производительность сверхвысокого разрешения со временем может быть улучшена. В конце концов, технологии машинного обучения сегодня в тренде и постоянно развиваются.

Многие наверняка уже знают разрешение 4К (3840х2160), но мало кто использует его в играх, на то есть веские причины, для такого разрешения надо необоснованно сначала покупать…

Технология AMD Super Resolution станет ответом на Nvidia DLSS

Два года назад вместе с видеокартами GeForce RTX Nvidia представила технологию сглаживания Deep Learning Super-Sampling (DLSS). Он работает только на видеокартах с тензором ядра (Turing, Volta, Ampere) и отвечает за сглаживание на основе машинного обучения. В сочетании с включенной трассировкой лучей DLSS позволяет резко увеличить частоту кадров практически без потери качества изображения. Ближайшей альтернативой AMD станет технология Super Resolution.

Как DirectML работает в Forza Horizon 3

AMD Super Resolution основана на DirectML API, расширении DirectX 12 для машинного обучения и искусственного интеллекта. Microsoft подтвердила, что консоли Xbox Series X / S следующего поколения будут поддерживать DirectML, поэтому перспективы новой технологии для будущих игр выглядят неплохо. Конечно, возможности DirectML не ограничиваются улучшением качества изображения и могут использоваться для улучшения интеллекта NPC, более реалистичной анимации и других полезных функций.

Технология AMD Super Resolution в настоящее время находится в разработке и, как ожидается, будет выпущена как часть межплатформенного технологического пакета AMD GPUOpen / FidelityFX. Super Resolution будет открытым и кроссплатформенным, а значит, сможет работать не только на видеоядрах AMD. В конечном счете, это более привлекательно для разработчиков, чем проприетарная реализация для ограниченного набора видеокарт. Более подробная информация о сверхвысоком разрешении ожидается после выпуска Radeon RX 6000 в конце этого месяца.