Как масштабировать изображение или видео с помощью ИИ: 8 лучших инструментов

Превратите свои размытые старые фотографии и видео в шедевры высокого разрешения с помощью искусственного интеллекта. Машинное обучение может интеллектуально улучшить ваши неподвижные и движущиеся изображения с помощью как бесплатных, так и платных инструментов, которые работают как изначально, так и в облаке.

Что такое апскейлинг?

Апскейлинг просто означает увеличение размера изображения или видео. Это делается путем увеличения разрешения, например, перехода от источника HD (1920 × 1080) к апскейлу 4K (3840 × 2160). Масштабирование включает в себя добавление недостающих пикселей к изображению, и сама техника не является чем-то новым. Старые методы масштабирования просто включают «растягивание» изображения путем дублирования пикселей или использования сглаживания.

Современные методы используют искусственный интеллект (ИИ) для повышения уровня детализации. ИИ «обучен» распознавать определенные особенности, такие как лица, облака, трава или деревья, чтобы можно было делать прогнозы о том, как должна выглядеть более качественная версия изображения. Эти методы прошли долгий путь, но они все еще далеки от совершенства. Сопоставление метода масштабирования с исходным изображением или видео может кардинально изменить результаты.

Вы можете использовать инструменты масштабирования ИИ, которые работают как локально на вашем компьютере, так и в облаке.

Масштабирование изображения

Возьмите изображение с низким разрешением, пикселизированное и зашумленное изображение и пропустите его через средство масштабирования, чтобы получить что-то, что вы можете распечатать, использовать в качестве фона рабочего стола или поделиться с друзьями в лучшем качестве. Масштабирование изображения не занимает много времени и не требует особенно мощного компьютера (для нативных решений).

Апскейл (бесплатно)

Лучшее место для начала, если вы ищете бесплатный апскейлер для одиночных или пакетных заданий, Upscayl — это бесплатный апскейлер изображений с открытым исходным кодом, который работает локально на вашем компьютере с Windows, Mac или Linux. Он имеет простой в использовании пользовательский интерфейс, несколько параметров масштабирования и возможность настраивать тип выходного изображения (JPG, PNG, WebP) и местоположение.

Результаты Upscayl впечатляют, с возможностью масштабирования стандартных фотографий, цифровых изображений и повышения резкости изображений. Инструмент работал лучше, чем некоторые из опробованных нами веб-опций, и время обработки было относительно быстрым (менее 10 секунд на нашем M1 Max MacBook) с возможностью «удвоения масштабирования» до гораздо более высоких разрешений.

Это то место, с которого стоит начать, если у вас есть большая фотобиблиотека или коллекция цифровых произведений искусства, которые нуждаются в масштабировании. Upscayl превосходит некоторые платные опции в этом списке.

ИИ Topaz GigaPixel (99 долларов США)

Если деньги не проблема, и вы хотите лучший инструмент для масштабирования, который можно купить за деньги, Gigapixel AI — это приложение для вас. Приложение обещает масштабировать изображения до 600%, и этот инструмент зарекомендовал себя в профессиональных кругах. Несмотря на свою репутацию, 99 долларов кажутся справедливой ценой, если вы серьезно относитесь к апскейлингу и ищете инструмент, который можно купить сразу. Вы также можете загрузить его и попробовать, прежде чем купить, чтобы увидеть результаты для себя.

Gigapixel AI включает в себя некоторые улучшения, которые вы не найдете в бесплатных опциях, например, AI для восстановления лиц, который специально разработан для волшебства на лицах с низким разрешением. Приложение также может удалять блочные артефакты сжатия, которые часто присутствуют на сильно сжатых изображениях.

Используйте Gigapixel AI как отдельное приложение, в Photoshop в качестве фильтра или как часть рабочего процесса Adobe Lightroom Classic. В этом нет облачного компонента, приложение изначально работает на компьютерах с Windows или Mac.

waifu2x или Waifu2X.io (бесплатно)

Основанный на проекте waifu2x, waifu2x — это онлайн-инструмент, который можно использовать для масштабирования изображений всего за несколько кликов. Первоначально проект был разработан для повышения качества художественных работ в стиле аниме с минимальной потерей качества, но он также в меньшей степени работает с фотографиями.

Демонстрационный веб-сайт проекта представляет собой относительно простую форму, которая позволяет вам ввести URL-адрес или загрузить изображение, а затем выбрать тип изображения, уровень шумоподавления и желаемый уровень масштабирования (до 200%). После этого вы сможете загрузить свое изображение. Кроме того, вы можете загрузить инструмент waifu2x с GitHub и использовать его через командную строку.

Также доступен Waifu2X.io, который не имеет отношения к исходному проекту, но предлагает до 10-кратного масштабирования. Оба апскейлера работают на одном и том же базовом движке, хотя последний можно использовать для загрузки более одного файла за раз.

Upscale.media от PixelBin (бесплатно с платными опциями)

Upscale.media — это веб-инструмент для масштабирования, который позволяет бесплатно масштабировать отдельное изображение до 400%. Просто загрузите свое изображение, позвольте инструменту сделать свою работу, а затем настройте коэффициент масштабирования или включите переключатель «Повысить качество», чтобы получить еще лучшие результаты. Эти дополнительные улучшения удаляют артефакты, балансируют резкость и пытаются сохранить естественный вид.

Сервис работает на PixelBin.io, отдельном сервисе, который позволяет масштабировать изображения массово. Создайте бесплатную учетную запись и получите 45 кредитов (хорошо для 45 апскейлов) или выберите платный уровень от 29 долларов в месяц (300 кредитов). Премиум-сервис дает вам доступ к инструментам стирания фона, инструментам суперсэмплинга и удалению водяных знаков.

Этот веб-инструмент предназначен для естественно выглядящих фотографий, поэтому наши результаты были лучше, чем у waifu2x, но мы все же предпочли бы, чтобы Upscayl работал локально, если ваш компьютер справляется с задачей. Если вы спешите или вам нужно что-то улучшить, и вы не можете установить стороннее приложение, Upscale.media идеально подходит, поскольку вам даже не нужно регистрировать учетную запись.

Масштабирование видео

Масштабирование фотографии похоже на масштабирование одного кадра видео, поэтому масштабирование видео, естественно, является гораздо более ресурсоемким процессом. Подобно требованиям для создания изображений AI с помощью Stable Diffusion, мощный компьютер будет иметь большое значение для сокращения времени обработки при запуске собственного видеоапскейлера, особенно когда речь идет о вашем графическом процессоре. (На самом деле, если у вас есть правильный графический процессор NVIDIA, теперь он может автоматически масштабировать любое видео, которое вы смотрите в своем браузере, с помощью функции на основе искусственного интеллекта под названием Video Super Resolution.)

Video2X (бесплатно)

Video2X — отличное место для начала масштабирования видео. Вы можете использовать Video2X как отдельное приложение для Windows или использовать возможности Google Colab для заимствования мощного графического процессора на срок до 12 часов (инструкции здесь). Приложение использует комбинацию апскейлеров waifu2x, Anime4K, SRMD, RealSR и Real-CUGAN и в основном ориентировано на апскейлинг анимационных работ, включая аниме, компьютерную графику и мультфильмы.

Тем не менее, нет никаких причин, по которым вы не можете попробовать использовать Video2X для всех видов проектов масштабирования. Он работает с видео, GIF-файлами и статическими изображениями и может масштабировать, очищать и даже интерполировать кадры. Вы можете преобразовать видео 360p в разрешение 4K или преобразовать видео со скоростью 30 кадров в секунду в видео со скоростью 120 кадров в секунду.

Приложение имеет пользовательский интерфейс, который позволяет легко настраивать пакетные задания и выбирать параметры вывода, такие как коэффициенты масштабирования или типы масштабирования. Вы также можете использовать приложение через командную строку или развернуть его на macOS или Linux с помощью файла-контейнера с помощью таких инструментов, как Docker или Podman.

Topaz Video AI (299 долларов США)

Topaz Video AI, вероятно, лучший инструмент для масштабирования видео, который вы можете купить, с соответствующей ценой. Хотя 299 долларов кажутся большими деньгами (это так), Topaz Video AI остается за вами, как только вы заплатите за него, без каких-либо текущих сборов. Тем не менее, вам понадобится мощный компьютер (под управлением Windows или macOS), чтобы максимально использовать приложение.

Приложение может создавать видео 4K или 8K за счет интеллектуальной оптимизации исходных файлов и переноса улучшений между кадрами. Это помогает уменьшить эффект сбоев, который вы получаете, выполняя это кадр за кадром в фотоапскейлере, а затем объединяя результаты. Он работает как с «натуральными» видео, так и с компьютерными изображениями (например, видеоиграми) и анимацией (например, мультфильмами и аниме).

Помимо апскейлинга, вы также получаете набор инструментов для деинтерлейсинга видео, восстановления потерянных деталей, интерполяции кадров (с генерацией кадров с замедлением до 4 раз) и шумоподавления для удаления артефактов и зернистости. Это мощное решение, для которого требуется мощная машина, поэтому обязательно попробуйте его, прежде чем покупать с помощью бесплатной пробной версии.

Пиксоп (цена варьируется)

Если вы ищете что-то, что обеспечивает уровень результатов, аналогичный Topaz Video AI, но также работает в облаке, возможно, вам стоит взглянуть на Pixop. Это апскейлер, который устраняет потребность в мощном компьютере (или очень долгое ожидание) за счет аутсорсинга обработки на серверах Pixop. Доступны различные улучшения, в том числе сверхвысокое разрешение, позволяющее повышать разрешение видео до разрешения 8K.

Если вы пойдете по этому пути, вы будете платить за гигапиксель. Вы можете определить приблизительную цену на странице Pixop Pricing. У вас есть возможность удалить неприглядную чересстрочную развертку и шум, оптимизировать изображение и выполнить преобразование частоты кадров, если хотите. Это дорого, но может быть рентабельно, если вы хотите выполнить только небольшую работу. Со скидкой в первом месяце (25%) Pixop будет взимать всего 22,70 доллара США за 30-минутное масштабирование видео или 55,03 доллара США, если вы также хотите добавить восстановление видео.

Если вы не хотите платить почти 300 долларов за Topaz Video AI, вам не хватает мощного компьютера для самостоятельного масштабирования, и вы хотите выполнять только небольшую задачу (например, масштабирование свадебного видео или личного проекта), Pixop может подойти для ты.

waifu2x-Extension-GUI (Windows, бесплатно) или waifu2x Video (Mac, бесплатно)

Еще одно совершенно бесплатное решение на основе апскейлера waifu2x — два проекта для Windows и macOS. waitfu2x-Extension-GUI — это родное приложение для Windows, в котором используются различные инструменты масштабирования, в том числе NVIDIA RTX Super Resolution, для масштабирования изображений, GIF-файлов, стандартного видео, анимированного видео и компьютерных изображений с полнокадровой интерполяцией и анализом кадров.

waifu2x Video – это решение для macOS, основанное на waifu2x для решения, которое в основном поддерживает масштабирование анимированного видео. Он намного менее развит, чем альтернатива Windows, но имеет простой в использовании пользовательский интерфейс и работает на macOS 10.15 и выше.

Счастливый апскейлинг

Современное масштабирование зависит от машинного обучения, когда компьютеры обучены распознавать функции и разумно заполнять детали. Рост ИИ за последние несколько лет достигает апогея с появлением все более примечательных проектов, таких как ChatGPT, и инструментов для создания изображений и художественных работ, которые вызывают этические вопросы.

Вы можете использовать ИИ для улучшения существующих видео и изображений с помощью описанных выше инструментов, но как насчет просмотра фильма, полностью созданного ИИ?