Нейросеть для создания анимации

Сальвадор «Франкенштейн» Дали

Музей Дали сотрудничал с компаниями Goodby Silverstein & Partners из Сан-Франциско, чтобы воплотить проект в жизнь. Картинку создавали по интервью, цитатам, архивным материалам и трехмерным моделям, а искусственный интеллект специализировался на жестах. Всего для работы понадобилось более 6000 кадров с изображением художника и 1000 часов машинного обучения. GS & P использовала эти материалы в обучении алгоритма, что позволило «изучить» лицо и тело Дали.

Условия использования: после регистрации можно оживить несколько фото бесплатно и скачать их с водяным знаком. Затем для доступа к Deep Nostalgia и другим сервисам MyHeritage понадобится подписка (есть бесплатный пробный период на 14 дней).

Что может: добавить на картинке мимику и движение. Можно выбрать стиль изображения и дополнительно задать текстовый промпт, есть инструменты и эффекты для анимации. В премиум-режиме можно добавить озвучку. Сервис делает качественную анимацию, однако сильно искажает черты на фото — получается совершенно новый персонаж.

Что может: превращать статичные 2D-изображения в анимированные 3D и видео. Фактически этот сервис не вносит серьёзных изменений в картинку и объекты на ней. Анимация создаётся за счёт движения с разной скоростью фона и отдельных участков изображения — получается эффект параллакса. Можно задать параметры вручную или довериться нейросети.

В обработке и анимации статичных изображений голов использовались три нейросети. Embedder (сеть для выделения признаков) разделяет изображения головы по лицевыми ориентирами на векторы, которые содержат независимую от позы информацию. Generator (сеть порождения изображений) использует их и генерирует набор сверточных слоев, которые обеспечивают устойчивость к искажениям исходника. Discriminator применяют для оценки качества и подлинности результата сети-генератора. В конце система превращает ориентиры лица человека в реалистичные фотопортреты.

Если нужно быстро оживить фото — добавить активную мимику и эмоции, анимировать фон, на помощь придут нейросети. Вот подборка бесплатных или условно бесплатных сервисов, где вы можете попробовать создать движущиеся или даже «говорящие» фото — для практических целей или просто для веселья. Сервисы не работают без регистрации — как минимум понадобится авторизация через Google-аккаунт.

В середине июля этого года россиянин Денис Ширяев тоже поучаствовал в «оживлении» портретов при помощи нейросетей. Молодой человек начал работать с технологией четыре года назад, когда завел Telegram-канал об IT. Денис брал старые видео, обучал нейросеть преображать картинку и выкладывал ролики на YouTube.

Что может: анимировать картинку, заменить исходный фон на красивый шаблон, добавлять анимационные эффекты и объекты (например, туман, фейерверк, блёстки). Пользователь может выбрать стиль изображения, а также настроить, какие участки, с какой скоростью и в каком направлении анимировать. Инструментов много, но придётся постараться, чтобы результат не напоминал аватарку из конца нулевых.

Pika

Что может: анимировать картинку самостоятельно или с учётом промпта, добавлять активную мимику на портретах, движение объектов и фона, менять направление камеры, добавлять фоновые звуки. Можно задать параметры для генерации, интенсивность движения, зум, а также указать «антипромпты» — параметры, которые нужно исключить.

Благодаря нашему инновационному подходу и AI-алгоритмам, предлагаем уникальный сервис, который позволяет пользователям создавать анимации из любых фотографий — будь то семейные воспоминания, профессиональные съемки или творческие проекты. Превратите ваше портфолио фотографий в впечатляющий анимационный ролик, который расскажет вашу историю уникальным и интерактивным способом.

В конце мая 2019 года специалисты из Центра искусственного интеллекта Samsung AI Center-Moscow и инженеры СколТеха научили нейросеть реалистично «оживлять» портреты. Система создает анимированные изображения с помощью 1-8 статичных кадров лица. Так реализуется подход few-shot learning, обучение на малом количестве примеров. Для самого точного «говорящего портрета» требуется более 32 изображений.

Чуть раньше музей Дали во Флориде «оживил» художника Сальвадора Дали. Событие приурочили к 115-му дню рождения испанца, 11 мая 2019 года. Организаторы применили технологию DeepFake, которая визуализирует сложные образы и применяет интерактивные системы. Художник не выходил за пределы экрана, но активно жестикулировал и общался с посетителями.

После Ширяев попробовал не преобразовывать, а «оживлять» картины. Он взял семь известных работ различных художников и обучил нейронную сеть превращать портреты в живых людей. Самыми известными «подопытными» стали Мона Лиза кисти Леонардо да Винчи и Венера с работы Сандро Боттичелли.

Создание анимации и оживление фото может стать отличным инструментом в руках знающего человека. Использовать данную способность можно для достижения следующих целей: 1. Создания рекламных кампаний и эффектной демонстрации товаров или услуг компании. Оживающие фотографии в рекламе не просто привлекают внимание, но и помогают пользователям понять, как работает тот или или иной продукт. 2. Разработки образовательных программ. Оживающие фото и анимацию можно использовать в образовательных целях. Например, для ознакомления с флорой или фауной планеты. 3. Подготовки развлекательных мероприятий. Используйте «живой» контент на выставках и фестивалях, привлекая еще больше внимания целевой аудитории. 4. Размещения в личном блоге. Подобный контент поможет придать блогу еще большую индивидуальность, зацепить внимание подписчиков и привлечь новых пользователей. AI способен оживить любую фотографию, будь то ваш недавний снимок или ретро-фотография, сделанная более века назад. Чтобы добиться нужного эффекта с помощью искусственного интеллекта не обязательно обладать навыками работы в специальных программах. Получить ошеломляющий результат можно всего за несколько минут.

Immersity AI (ранее LeiaPix)

Онлайн-сервис заставит ваши фотографии говорить — есть функция липсинга и 30 вариантов голосов. В целом Pika предназначена для работы с видео: можно редактировать ролики, убирать и добавлять персонажей и детали, дорисовывать фон, менять готовое видео по введённому промпту.

Открывайте новые возможности с SMM GPT — вашим надежным помощником в мире цифровой анимации. С помощью передовых технологий искусственного интеллекта мы преобразуем статические изображения в захватывающие анимационные сцены, вдохни жизнь в каждый снимок. Нейросеть обладает невероятным функционалом и богатыми возможностями. Прекрасным примером этому служит способность оживления фотографий и создание анимации по запросу пользователя. Вы можете лично испытать все возможности нейросети с помощью сервиса SMM-GPT.

Многие помнят говорящие портреты из вселенной Гарри Поттера. Волшебные изображения показывали не только внешность, но личности людей. Запечатленные имели свои характеры, общались между собой и обитателями Хогвартса, сохраняли память прообразов. Теперь расскажем, как искусственные нейросети делают эту магию реальной.

Создатели также использовали наработки в генеративно-состязательных нейросетях (GAN) и машинное мета-обучение. Одна модель «дорисовывает» недостающие детали, вторая пытается определить, что изображение искусственное, а не настоящее. Разработчики отмечают, что для обучения модель использует всего несколько фото или картинок. Источником материала стала база данных с видеоизображениями знаменитостей.

Модель художника дорабатывали реальные актеры, которые имели схожую с мастером внешность. Озвучку Дали сделал артист с характерным испанским акцентом. Все это создало «подделку высокого уровня», которая сопровождала гостей музея на выставке «Dali Lives». «Художник» рассказывал истории из своей жизни, цитировал самого себя, открывал дверь и «создавал» картины. Интерактивная система также реагировала на действия посетителей, отвечала на простые вопросы и позировала для селфи.

Условия использования: в бесплатном режиме можно генерировать картинки с 3D-моушном и видеосемплы до 20 секунд и скачивать их — правда, в разрешении до 720 px и с вотермаркой. Расширенные возможности (убрать вотермарку, повысить качество до 4K и удлинить видео) можно за платные кредиты. При регистрации пользователь получает 100 кредитов.