Original size 1240x1750

Воспроизведение рекламных роликов средствами генеративного ИИ

Консистентность изображений: персонаж

This project is a student project at the School of Design or a research project at the School of Design. This project is not commercial and serves educational purposes

Поставленные задачи:

Создание ключевых кадров с новым персонажем с максимально консистентным образом на всех кадрах.

Цели:

Создать образ нового персонажа.

Заменить персонажа на кадрах, максимально сохранив детали как окружения, так и нового персонажа.

Анализ консистентности.

Ход работы

Пайплайн создания серии изображений с персонажем с помощью нейросетей:

1. Генерация ключевого образа персонажа в различных ракурсах.

2. Разобрать оригинальный ролик на ключевые кадры.

3. Интегрировать в оригинальные кадры нового персонажа в максимально похожих позах на позы из оригинального ролика.

Персонаж

Original size 1920x1080

ITSALIVE для Сбербанка

Сберкот — это антропоморфное существо в худи-мерче Сбербанка, с аккуратными формами, детализированной шерстью и большими милыми глазами.

Для замены персонажа в ролике я решила так же остановиться на антропоморфном животном, но сделать зайку в свитере.

Original size 1024x1024

Генерация в midjourney

Самое первое изображение создается в midjourney так как эта нейросеть больше всего подходит для создания художественных образов.

Original size 1920x1080

Генерация в нейросетях

Немного доработав образ, я создала серию изображений персонажа с разных ракурсов, чтобы их можно было легко использовать в дальнейшей работе.

Original size 1920x1080

Генерация в нейросетях

Эти изображения в дальнейшем будут использоваться как референсы.

Чтобы создать максимально похожее изображение я использовала оригинальный кадр и персонажа в ракурсе, соответствующему ракурсу на кадре из ролика.

1. ITSALIVE для Сбербанка 2. Генерация

Промпт: Создай крупный план ушек пушистого антропоморфного зайчика из референса. Сохрани точную стилистику и освещение исходного кадра: тёмный фон, глубокие зелёно-сине-чёрные тени, яркий контровой свет по контуру шерсти с мягким неоново-зеленым свечением. Показать только верх головы и уши — композиция как в референсе: уши занимают центральную область кадра, видны кончики шерсти, мягкая подсветка сзади, никакого лица. Шерсть должна быть очень детализированной, пушистой, с реалистичными выбивающимися волосками. У зайчика уши должны быть его оригинальной формы, длинные, вертикальные, с внутренней розоватой частью. Сохранить атмосферу: кинематографичный контровой свет, минимализм, глубокий тёмный фон. Ничего лишнего не добавлять.

Генерации

Для большего контроля при анимации необходимо создать еще один кадр на основе полученного, где ушки у зайки опущены. Каждое изображение генерируется только после анализа движения, которое происходит в ролике так, чтобы было максимально понятно какие промежуточные движения должна создать нейросеть между двумя кадрами.

1. ITSALIVE для Сбербанка 2-4. Генерация

Каждое изображение создается постепенно, добавляя и изменяя детали.

1. На оригинальном кадре заменяем персонажа 2. Меняем руки мальчика из оригинального ролика на женские 3. Меняем позу зайчика

1. ITSALIVE для Сбербанка 2-6. Генерация

Чтобы создать кадры с собой, я так же действовала постепенно заменяя элементы:

1. Загрузила свою фотографию как референс и заменила на оригинальном кадре мальчика на себя

2. Заменила одежду на джинсовую рубашку, чтобы одежда сочеталась с предыдущим кадром

3. Заменила окружение

4. Изменила положение и цвет телефона так, чтобы оно было идентичным тому, что было в предыдущем кадре

5. Создала на основе полученного изображение новое, которое пойдет как ключевой кадр в анимацию.

Генерации

1. Просим нейросеть сделать дальний план, акцентируя внимание на обуви как в прошлых кадрах (белые кроссовки), чтобы с большей вероятностью получить кадр в полный рост

2. Добавляем эмоции и разные позы зайки.

Серия итоговых изображений