Нейросеть LAPUSKA улучшает качество фотографий в два раза быстрее аналогов

Quick, Draw!

ClipDrop — онлайн-сервис от владельцев известной нейросети Stable Diffusion. Доступен также в формате приложения для смартфонов на Android и iOS и как плагин для Photoshop. ClipDrop Image Upscaler с помощью алгоритмов искусственного интеллекта увеличивает размеры изображения, улучшает качество фотографий и делает их более четкими, убирая лишние шумы.

Существующие модели для получения изображений со сверхвысоким разрешением имеют значительные недостатки, например наиболее популярные нейронные модели SRGAN и LapSRN требуют больших вычислительных затрат и значительного объема компьютерной памяти, что влияет на доступность их использования и время, необходимое для получения результа. LapSRN как правило, позволяет получить более сглаженные изображения, что приводит к потере некоторых мелких деталей, в то время как на изображениях, обработанных при помощи SRGAN, остается много цифрового шума.

BigJPG — удобный инструмент для улучшения качества, увеличения размера и разрешения изображения. Помимо веб-сайта доступно бесплатное приложение для Windows, Mac и смартфонов на Android и iOS. При работе онлайн не обязательно даже регистрироваться и проходить авторизацию, правда, мы все же рекомендуем войти на сайт: так все изображения будут автоматически сохраняться в вашем аккаунте, что, конечно, очень удобно.

Сервис поддерживает работу с файлами в форматах jpg, jpeg, png и webp с разрешением не выше 1500Ч1500 пикселей и размером до 25 Мбайт. Бесплатно можно обработать до 50 изображений в месяц. Вы самостоятельно можете выбрать масштаб увеличения изображения в 2 или в 4 раза, а также с помощью специального ползунка подключить функцию улучшения качества. Искусственный интеллект автоматически сделает картинки более яркими и четкими.

В бесплатной версии доступно двукратное увеличение изображений с разрешением не выше 2048×2048 пикселей. Для работы с сервисом нужно авторизоваться с помощью аккаунта Google. Дальше все предельно просто: вы загружаете или просто “перетаскиваете” в окно файл, который хотите изменить, нажимаете на кнопку Upscale и получаете улучшенное нейросетью изображение без каких-либо водяных знаков. Картинку можно скачать.

«Архитектура предлагаемой нами нейронной сети состоит из нескольких сверточных слоев с разной структурой. В основе структуры сети лежит структура SRGAN, которая показала наилучшие результаты во время обучения, и использует стратегию пост-апсемплинга, при которой признаки извлекаются непосредственно из входных данных LR набором остаточных блоков, а изображение масштабируется в конце распространения. Важным моментом в процессе обучения реализованных моделей являются обучающие данные. В данной работе было решено использовать датасет DIV2K, поскольку он содержит 800 обучающих цветных изображений RGB HR с соответствующими уменьшенными изображениями LR с различными коэффициентами», — говорит соавтор исследования Илья Макаров, директор центра искусственного интеллекта НИТУ МИСИС, руководитель группы «ИИ в промышленности» Института AIRI .

Бесплатно можно обработать до 20 фотографий в месяц, максимальный размер изображения — 5 Мбайт, разрешение — 3000Ч3000 пикселей. Максимальный коэффициент увеличения — 4. Сервис на базе алгоритмов искусственного интеллекта лучше всего работает с иллюстрациями и картинками в стиле аниме, но поддерживает также и обработку фотографий.

Для работы с Waifu2x не нужно регистрироваться, достаточно загрузить изображение, указать его тип (фото или иллюстрация), выбрать масштаб увеличения (1,6 или 2), степень уменьшения шума (от низкой до очень высокой), а также формат готового файла (png или jpg). Загружаемое изображение должно соответствовать следующим требованиям: максимальный размер файла — 5 Мбайт, предельное разрешение — 1500×1500 пикселей.

ClipDrop

Улучшить качество изображений может быть полезно в нескольких случаях: при оцифровке старых фотографий, их печати или просто публикации в соцсетях. Сегодня увеличить разрешение фото и сделать его в целом качественнее можно с помощью сервисов на основе нейросетей и алгоритмов искусственного интеллекта (ИИ).

Pixelcut Ai — онлайн-сервис на базе нейросети, который может удалить и заменить фон, убрать лишние предметы на фото, раскрасить черно-белые снимки и, конечно, увеличить разрешение и размер изображения. Для работы необязательно регистрироваться, поскольку сайт поддерживает авторизацию с помощью аккаунтов Google и Apple. У Pixelcut есть веб-версия и приложения для iPhone и Android-смартфонов.

Новая архитектура нейронной сети LAPUSKA для сверхвысокого разрешения изображений сочетает лучшие свойства существующих моделей SRGAN и LapSRN и устраняет их недостатки. Предлагаемая модель имеет качество, аналогичное LapSRN, но она более чем в 2 раза быстрее по времени обработки.

Чтобы увеличить изображение, достаточно загрузить его и во всплывающем окне указать его тип: фото или иллюстрация. Далее выбрать, во сколько раз требуется увеличить: в 2 или 4. В платной версии доступно 16-кратное увеличение. Также укажите, хотите ли вы уменьшить количество шума на картинке. Когда вы нажмете на “Старт”, сервис сообщит, сколько времени требуется для обработки изображения. Готовую картинку можно скачать.

Анализ и интерпретация изображений или видео с помощью машинного зрения, уже применяется в медицине, сельском хозяйстве, транспорте, индустрии развлечений и многих других областях. Перспективным направлением компьютерного зрения является супер-разрешение изображений, которое не просто увеличивает размер изображения, но и улучшает его качество. Это позволяет увидеть больше информации и деталей, которые были недоступны для человеческого зрения при низком разрешении фотографии.

Нейросети умеют не только рисовать фантастические пейзажи, но и обрабатывать фотографии. Искусственный интеллект поможет улучшить качество изображений, увеличить их размер и убрать шумы всего за несколько кликов. Редакция ZOOM.CNews выбрала самые функциональные и бесплатные сервисы для улучшения и обработки фото.

PortraitAI

Чтобы опробовать сервис, достаточно зарегистрироваться с помощью Google-аккаунта или адреса электронной почты и загрузить фотографии, которые вы бы хотели улучшить или колоризировать. Бесплатно можно обработать до 50 изображений. Если вы планируете отреставрировать целый альбом — это тоже не проблема. Colorize.cc поддерживает оплату картами российских банков: базовый пакет на 60 изображений обойдется в 600 рублей.

Icons8 AI Image Upscaler — условно-бесплатный онлайн-сервис для обработки изображений. В демо-версии, которая не требует регистрации, можно бесплатно увеличить в 2 раза до 3 картинок с максимальным размером до 5 Мбайт. Начиная с 4 изображения, каждое обойдется в AI Image Enlarger — онлайн-инструмент на основе алгоритмов искусственного интеллекта, с помощью которого вы сможете увеличить размер изображения без потери качества. Бесплатная версия AI Image Enlarger позволяет обработать до восьми изображений в месяц, срок действия пробной версии не ограничен, а счетчик обновляется каждый месяц. Чтобы воспользоваться сервисом, понадобится пройти регистрацию с помощью электронной почты и выбрать free account (бесплатная версия).,2. Безлимитная подписка на месяц стоит $99, но оплата российскими картами на данный момент невозможна.

Помимо функции увеличения и улучшения качества изображений, на сайте вы найдете инструменты для восстановления старых фотографий, колоризации черно-белых фото и так далее. Главный недостаток сервиса — длительное время ожидания, поскольку изображения обрабатываются в порядке живой очереди. Нам пришлось ждать почти час, чтобы протестировать Vance AI.

Ученые Университета МИСИС и НИУ ВШЭ представили новую архитектуру нейронной сети LAPUSKA (LaPlacian UpScale Knowledge Alignment), способную значительно улучшить качество изображений. Новый подход позволяет обрабатывать фотографии в 2 раза быстрее по сравнению с выбранными аналогами. В будущем разработка исследователей поможет распознавать лица и точнее обрабатывать изображения.

Технология получения изображений со сверхвысоким разрешением помогает преодолеть ограничения, присущие устройствам фото- и видеосъемки и может быть полезно в различных практических приложениях. Например, в области безопасности супер-разрешение изображений помогает увеличивать качество снимков с камер видеонаблюдения для распознавания лиц или номеров автомобилей, в области цифровой обработки изображений — помогает восстановить старые или поврежденные фотографии, а также улучшить качество фотографий, снятых в сложных условиях освещения или на большом расстоянии.

Нейросети делают жизнь проще: обрабатывают фотографии, увеличивают их разрешение, убирают лишнее. Алгоритмы на основе машинного обучения позволяют автоматически и за пару кликов сделать то, на что раньше уходили силы и время. Вот полезные сервисы, которые можно использовать для обработки и улучшения фото и изображений.