Нейросеть которая раскрашивает мангу

0
13

Как с помощью нейросети Niji Journey нарисовать что угодно в стиле аниме — и себя тоже

Популярность стиля аниме

Стиль аниме становится все более популярным во всем мире, отчасти благодаря успеху культовых аниме-сериалов, таких как Жемчуг дракона, Наруто и Сейлор Мун. Популярность аниме также подпитывается ростом цифровых медиа и потоковых сервисов, которые упростили фанатам доступ к аниме-контенту и обмен им.

P.S. Помните, что «нет предела совершенству». Даже если первый результат вас не полностью устроит, не отчаивайтесь! Попробуйте изменить запрос или добавить новые детали. В конце концов, Rome wasn’t built in a day, и создание идеального аниме арта тоже требует практики и терпения.

Описание желаемой картинки сформулируйте на английском языке. Если не знаете английский, можете попробовать плагин-переводчик для «Дискорда». Когда придумаете запрос, нажмите кнопку «Отправить». Бот начнет генерировать изображение. Вы в прямом эфире увидите, как смутные очертания превращаются в четыре картинки.

Исследовательская группа Сеульского национального университета представила проект Tag2Pix для раскрашивания черно-белых набросков по текстовым атрибутам на основе генеративной состязательной нейросети (GAN). Используя текстовые атрибуты типа «blue_hair» или «brown_eyes», Tag2Pix может преобразовывать однотонные скетчи в цветные иллюстрации.
Существующие нейросети, которые умеют автоматически раскрашивать изображения, либо требуют участия художника, который должен отметить цветными штрихами нужные области скетча, как например в PaintsChainer, либо для них нужны иллюстрации-доноры стиля, как в нейросети Style2Paints. В отличие от первых двух для Tag2Pix не требуются дополнительные трудозатраты и вычислительные ресурсы. В Tag2Pix используется набор данных, который на входе содержит однотонные скетчи, теги инвариантных цветов (Color Invariant Tag, CIT) и теги варьируемых цветов (Color Variable Tag, CVT), а на выходе — цветные иллюстрации. Порождающая и различающая модели обрабатывают входные скетчи, извлекают теги СIT, кодируют теги CVT и на выходе получается итоговая иллюстрация. Новизна нейросети в архитектуре Squeeze and Excitation with Concatenation (SECat), которая позволяет сегментировать исходник по нескольким тегам и применять соответствующие цвета. С ее помощью достигается раскрашивание даже небольших участков, например глаз. В примере ниже каждый ряд раскрашивался, используя два общих тега CIT и один варьируемый CVT на входе, что позволило добиться естественности раскрашивания при использовании разных комбинаций тегов.

Сравнение трех нейросетей по критерию детальности сегментирования, естественности, точности и качеству также показало превосходство нового подхода.

Аниме-аватарки — или стилизация любого реального персонажа под аниме. Генерировать себя, друзей или героев мемов в аниме-нейросетях — увлекательное занятие. Если хотите использовать свой снимок, загрузите его на любой фотохостинг, от открытого альбома во «Вконтакте» до специализированных сервисов вроде Postimages, и скопируйте оттуда ссылку из поля direct link.

Чтобы сделать такую картинку для разных выражений лица, добавляйте к запросу expression sheet, для полной модели персонажа — character design sheet, character turnaround sheet, character pose sheet, concept art sheet, для разной одежды — dress-up sheet, fashion sheet, items sheet, accessories, для разных поз — character pose sheet, concept art sheet. Выбирайте два-три запроса, которые вам больше всего нравятся.

Фигурки. Niji Journey умеет генерировать гиперреалистичные фотографии игрушек. Основной запрос для такого результата — figurine of… и имя или описание вашего персонажа. Изменять запрос можно, добавляя in glass display case, made of plastic, made of polyester putty, studio lighting, with box, funkopop.

Как сгенерировать аниме-картинку. Niji Journey работает точно так же , как Midjourney. На сервере ищите каналы image-generation. Там вместе с вами картинки будут генерировать другие пользователи. Чтобы нейросеть сгенерировала изображение, нужно ввести команду /imagine в любом из чатов и придумать запрос.

Как составить запрос

Можно начать генерировать с нуля, а можно взять картинку и использовать ее как референс. Для исходной точки подойдет, к примеру, фан-арт . Для этого добавьте ссылку на изображение в поле после слова /imagine и подпишите свой запрос, например Asuka from Evangelion. Модель возьмет детали из исходного изображения и объединит их с персонажем.

Как выбрать разрешение картинки. По умолчанию нейросеть генерирует картинки в разрешении 1:1. Его можно изменить, если добавить в конце запроса параметр —ar. Горизонтальное разрешение —ar 3:2 создает кинематографичные картинки, а вертикальное —ar 2:3 — постеры и портреты. Другие разрешения в Niji Journey не работают. Запрос выглядит так: 90s anime, girl at the deck, —ar 2:3 .

ЧИТАТЬ ТАКЖЕ:  Нейросеть которая генерирует несуществующих людей

Аниме-персонажи. Niji Journey намного лучше генерирует героев аниме, чем Midjourney, поскольку знает стилистику многих популярных тайтлов. По данным AITuts, Niji Journey всегда точно попадает в образ Реи и Аски из «Евангелиона», Рин и Сейбер из «Судьбы: Ночь схватки», Зеро 2 из «Любимый во Франксе», а также Саске из «Наруто». Чем больше фан-артов у героя, тем больше вероятность того, что нейросеть его повторит.

Какие есть ограничения и сколько стоит подписка. В бесплатной версии нейросети 25 попыток. Попытка тратится и на полноценный запрос, и на апскейл картинки. Если вы уже потратили свои генерации в Midjourney, то новые в Niji Journey не будут доступны. Ограничения можно убрать, заплатив за подписку. У Midjourney и Niji Journey общая подписка: если заплатили за первый сервис, то доступ ко второму откроется автоматически.

Я, как художник, которого пытается заменить машина, а так же поклонник Бредбери, не очень горю желанием это узнать. А вообще, если это как-то помогает расскрашивать, например, слои анимации, коих тысячи тысяч, то в общем-то не плохо. Просто заливки и градиенты-простите это можно и стилями заливать, как мне кажется.

Как смешивать картинки. Если понравилась композиция или стилистика сгенерированной картинки, можно использовать ее как основу для запроса и менять в ней персонажей. Для этого нужно включить в настройках ремикс-мод . Напишите в чате /settings и нажмите на Remix mode. После этого при нажатии на варианты V1, V2, V3 или V4 появится окно с запросом, который можно исправить или дополнить.

Модификатор года

Anime XL — мощный инструмент для генерации высококачественных аниме-изображений. Однако, чтобы получить наилучшие результаты, важно правильно составлять подсказки (prompts). В этой статье мы рассмотрим рекомендации по использованию тегов и модификаторов для создания впечатляющих картинок.

Стиль аниме относится к отличительному и узнаваемому художественному стилю, который возник в Японии и становится все более популярным во всем мире. Термин «аниме» является японской аббревиатурой слова «анимация» и относится к анимированному контенту, который производится в Японии. Стиль аниме характеризуется использованием ярких цветов, преувеличенными чертами лица и выразительными эмоциями.

В последующие десятилетия аниме превратилось в особый стиль под влиянием как традиционного японского искусства, так и западной анимации. Одной из наиболее важных фигур в развитии стиля аниме был Осаму Тэдзука, который создал Astro Boy в 1963 году. В этом культовом аниме-сериале были представлены характерные дизайны персонажей и методы повествования, которые впоследствии определили стиль аниме.

А если хотите получить кадр из аниме, а не дизайн персонажа, то добавляйте anime screencap или anime still. Таким образом получится генерировать даже никогда не существовавшие аниме-произведения. Например, можно детально описать сцену из «Звездных войн», но дополнить ее запросом anime screencap и добавить стилистику любимого режиссера.

Вы можете указать в запросе, насколько сгенерированное изображение должно быть стилизовано. Если написать просто название аниме, у нейросети будет больше свободы. А если уточнять детали, то вы получите контроль над результатом: можно указать прическу, фон, позу героя или в целом стилистику фотографии. Мы попробовали превратить в аниме семью Букиных из сериала «Счастливы вместе».

Второй способ увеличить количество попыток — заново создавать аккаунты в «Дискорде» после каждого окончания пробной версии. Но есть риск получить бан на платформе. Третий способ — купить подписку на основную Midjourney за 30 $⁣ ( 2093 ₽) в месяц. Если подписка на Midjourney активна, то доступ к Niji Journey предоставляется бесплатно.

Стиль аниме впервые появился в Японии в начале 1900-х годов, когда японские аниматоры начали экспериментировать с различными техниками анимации. Первый аниме-фильм, Кацудо Шашин (1907 г.), представлял собой двухминутный клип, в котором мальчик пишет символы для «кинофильма» на доске, за которым следует короткая анимация точки на доске, которая движется, а затем превращается в кошка.

Как получить доступ к Njji Journey. В основе сервиса лежит Midjourney — нейросеть, генерирующая картинки по текстовому описанию. Мы подробно рассказывали о сервисе в отдельном материале. Это самая доступная нейросеть из конкурентов. К Dall-E нет публичного доступа, а для запуска полноценной Stable Diffusion нужен хороший компьютер. Вся работа с Midjourney происходит в мессенджере «Дискорда» с любого устройства.

ОСТАВЬТЕ ОТВЕТ

Пожалуйста, введите ваш комментарий!
пожалуйста, введите ваше имя здесь