Почему нейросеть не умеет правильно рисовать руки с нужным числом пальцев

«Что-то с глазами»Эту проблему продемонстрировали многочисленные эксперименты с нейросетью Lensa, в которой пользователи делали для себя аватарки в различных стилях по фото. Многие жаловались на косые глаза и странный взгляд на изображениях. Причём отбраковывать такие картинки было особенно обидно — в остальном многие из них выходили красивыми и яркими.

Однако хуже обрезанной головы может быть только плохо нарисованная голова с перекошенным лицом. Это не редкость в работах ИИ. Нейросеть может неестественно расположить части лица и слить его с пространством. Понятия «естественно» у технологии нет, а так как все люди разные, при поиске универсальных решений ошибки неизбежны.

Дело в том, что ИИ не осмысливает референсы с точки зрения анатомии и восприятия человека. Кроме того, на многих исходниках кисти рук показаны с разных ракурсов, так что видно разное количество пальцев — а когда предметов много, но неясного количества, машина выдаёт случайный результат.

Неправильное изображение пальцев на руках пока считается багом. Таких ошибок найдено 4. Еще она неохотно изображает человека в полный рост. Несмотря на то, что нейросеть обучаемая система, но достоверность не ее конёк. Ее задача обработать большое количество вариантов и сделать модификацию, не стоит задача сделать правильно, как должно быть. Возможно со временем устранят эту проблему, наполняя ее память похожими запросами с акцентом на конечностях с подчеркиванием различия между человеком и животными. Но, в принципе, большее количество пальцев мне не мешает.)

Нейросеть может изобразить фантастических существ сочетающих в себе нескольких животных и насекомых, яркие декоративные картинки, абстрактные фигуры и пейзажи. Известные произведения (Гарри Поттер) в образах котов например. Или «Властелин колец», нейросеть Midjourney, по запросу изобразить в виде котов, справилась с поставленной задачей хорошо.

Безумные рукиГлавная причина, по которой пользователи критикуют нейросети, — это неумение рисовать руки. ИИ не усваивает форму человеческой кисти и добавляет лишние пальцы или, наоборот, рисует «лапки динозавра», а также в целом искажает конечности. Иногда нейросети даже дорисовывают лишнюю руку или ногу целиком. Причём стиль рисовки здесь не имеет значения: безумные руки можно увидеть и у реалистичных изображений, и у «мультяшных».

Сейчас бум на рисование нейросетью. На некоторых сайтах это можно сделать совершенно бесплатно. Но нет пока русифицированной версии, все на английском, но разберется даже ребенок. Особенно качественными сейчас у искусственного интеллекта получаются картинки с превращениями, метаморфозами, особенно подкупают объемные изображения орнаментов на стилизованном под старину оружии и, конечно, постапокалиптические фоны.

В основном это связанно с не замечанием нейросетью мелких деталей, по типу пальцев, ювелирческих изделий и т. д. В основном нейросеть хорошо справляется с редакцией какого либо изображение в более красивое, красочное и невообразимое. Возможно в дальнейшем над этим поработают.

Размытые детали, пятна и линииБывает такое: арт от нейросети кажется красивым и детализированным, но если начать присматриваться, то оказывается, что никакие конкретные детали там не прорисованы. Эта проблема встречается чаще, чем может показаться: вместо цветов — пятна, вместо птиц — пятна, вместо надписей — линии и пятна. Формы напоминают то, что должно быть изображено, но ничего в сущности разглядеть на таких картинках нельзя.

Технология ещё учится, и многие работы уже сейчас корректнее изображают человека и реальные предметы. Есть ли в будущем место человеческим дизайнерам — это открытый вопрос, на который можно будет ответить только спустя годы, наблюдая за развитием искусственного интеллекта.

Бум нейросетей — тренд последних лет, который набрал обороты в конце 2022 года. Искусственный интеллект (ИИ) стал доступен широкому кругу пользователей как возможность генерировать уникальные изображения и иллюстрировать самые безумные фантазии, так что в интернете уже поговаривают о том, что профессия дизайнера изжила себя, ведь технология уже рисует лучше и быстрее. При этом есть несколько проблем, которые создателям нейросетей ещё не удалось решить до конца — Sostav рассказал о них в своём материале.

Обрезанные головы и перекошенные лицаБывает и такое, что нейросеть генерирует арт с человеком с урезанной головой или вовсе без неё. Дело в том, что при загрузке референсов люди добавляют картинки не во весь рост или такие, где туловище занимает большую часть пространства — нейросеть путается и начинает считать именно торс самой важной частью потрета, позволяя себе обрезать голову.

Из-за сложности прорисовки мелких деталей, проблемы с изображением нужного числа пальцев пока сохраняются, но так как нейросети постоянно модернизируются и обучаются новому, со временем они смогут более точно выдавать чаще нужные изображения по правильно составленным запросам.

Проблема сохраняется и тогда, когда ИИ призван решить проблему зрительного контакта человека с камерой. Недавно компания Nvidia выпустила технологию на основе нейросети, которая позволяет создать имитацию зрительного контакта на видео, если человек не смотрит в камеру. Выглядит это так, как будто ИИ просто поменял расположение глаз — взгляд такой же неживой и расфокусированный, как на многих картинках от нейросетей.

Лишние зубы, языки и челюстиПорой нейросеть рисует зубы и другие детали рта не лучше рук: рот во рту, челюсть на челюсти, кривые зубы или безумное их количество. Как и в случае с конечностями, ИИ понятия не имеет, как изобразить много похожих объектов в рамках одного, и почему конечный результат не выглядит натурально.

Также «дипфейковые» глаза движутся неестественно быстро — это отметил журналист The Verge, протестировавший новую функцию. На части видео он смотрит в камеру, так что зритель может увидеть разницу между тем, как это выглядит при обычной съёмке и после обработки ИИ. Кроме того, наличие и отсутствие очков никак не сказалось на качестве изображения.