Обзор нейросетей, которые рисуют аниме по фото

Аниме-персонажи из фотографий

В качестве результата вам показывается видео с преображением вашей фотографии. Чтобы получить фото «до/после», надо развернуть страницу сайта на полный экран и нажать внизу левую кнопку, верхний край которой еле виден. Впрочем, сайт сделан скорее под мобильные устройства, поэтому, возможно, с телефонов пользоваться им будет удобнее (но это не точно).

Подытожим: если вам нужно быстро обработать фото — выбирайте фильтры фоторедакторов, если нужен уникальный опыт и немного переосмысленный сюжет в стиле аниме — воспользуйтесь нейросетями. О работе последних и поговорим ниже. Пробуем превратить Уилла Смита в героя аниме, используя популярные сервисы.

Нашумевший в прошлом AI-генератор аниме-аватарок из Китая, ещё недавно носивший название Different Dimension Me. С помощью искусственного интеллекта любое фото или рисунок превращается в аниме-арт. Разработчик — компания-создатель Tencent и китайской соцсети QQ.

Фоторедакторы же обычно просто накладывают фильтры на фото, поэтому результат будет всегда один и тот же. А значит, вы не сможете сделать несколько вариантов обработки и выбрать лучший, разве что вручную подогнать настройки фильтра под себя.

В общем, результат всегда оказывается разный, сколько раз ни загружай одну и ту же фотку. Мы предполагали, что это не нейросеть, а просто накладывание на фото фильтра, стилизующего картинку под аниме. Но тот факт, что сервис выдает каждый раз разные фотки, меняя черты лица, задний фон или другие детали, означает, что работает он при помощи нейросети. И мы даже знаем, какой.

Сервис максимально прост в использовании и понятен даже без знания китайского — тут есть лишь одна кнопка. При нажатии на нее появляется кадр с фотографией девушки, а под ним еще одна кнопка. Нажав на эту вторую кнопку, вы можете выбрать на компьютере нужное изображение и загрузить его на сервис. Несколько секунд — и результат «аниме-преображения» готов.

Стать героем аниме можно за одну минуту. Для этого нужно предоставить своё фото нейросети. Внутри неё искусственный интеллект анализирует изображение и создаёт рисунки в стилистике anime. И они получаются довольно качественными: некоторые сервисы не только обрабатывают лица, но и добавляют некоторые элементы на фото, чтобы поддержать восточную стилистику.

Мобильное приложение для редактирования фото, созданное российской компанией Prisma Labs. Осенью 2022 приложение обновилось и выпустило в мир опцию Magic Avatars. Новая функция с помощью ИИ генерирует стилизованные портреты пользователей, анализируя загруженные фото.

Meitu

Нам не удалось выяснить, имеет ли сервис отношение к прежнему Different Dimension Me, о котором мы рассказывали выше. По одной из версий, этот сайт создали китайцы, которые учатся в техническом вузе. Качество и глубина обработки — явно ниже, чем у предыдущего сервиса.

Для запуска магии ИИ нужно выбрать 10–20 подходящих селфи и загрузить их в приложение. Рекомендации о том, какие фотки подходят, а какие нет, вы получите перед загрузкой. Обычно приложению не нравятся изображения с другими людьми, животными, частично закрытым лицом или на пёстром фоне.

Нейросети для генерации, объединения или редактирования изображений мгновенно становятся популярными. Это доказывает пример Lensa, которая встроила в приложение генератор аватаров на основе ваших загруженных фотографий. Но новое китайское приложение имеет еще больший потенциал, ведь оно обещает превратить каждую фотку в кадр из аниме.

Нейронные сети анализируют загруженные фото, выделяют лица и создают уникальную картинку, каждый раз новую. При этом весь творческий процесс происходит без участия человека. Нейросеть может добавлять какие-то элементы на картинку (например, деревья, мебель, листья, снег), менять одежду и задний фон. С помощью этого алгоритма вы можете получить несколько уникальных вариантов одного и того же фото.

Как использовать. Интерфейс сайта выглядит специфически, ведь он рассчитан на аудиторию из Китая, поэтому русскоязычному пользователю может показаться непривычным. Чтобы сайт отображался корректно, его лучше открывать на мобильном или сделать окно браузера вертикальным, если вы заходите с компьютера.

Все дело в том, что сервис находится на поддомене основного сайта qq.com — китайского мессенджера, созданного компанией Tencent. У этой же компании есть проект ARC — лаборатория, занимающаяся, в том числе, нейросетями. Несколько алгоритмов связаны с обработкой изображений — вы можете сами протестировать их по этой ссылке. Один из алгоритмов позволяет улучшать качество изображения в аниме, мы предполагаем, что описанный выше сервис строится на этих нейросетях.