Бумажная вселенная за три дня: ИИ-мультфильм для клипа Beku и МТС

медиапродукты

Задачи

Сделать клип для артистки Beku совместно с МТС, где половина мира — нарисованная. Нужны были три минуты анимации, которые держатся в одной стилистике и монтируются встык с живой съёмкой.

Действия

Придумали концепцию бумажного мира, отдельный день потратили на режиссуру и закрепление персонажей, и только потом ушли в генерацию: больше 150 генераций, 20 сцен по три варианта каждая.

Результат

Три минуты анимации за три дня работы. На монтаж ушли 60 роликов, которые смешались с живыми кадрами артистки из Казани — съёмки и генерации шли параллельно и сошлись в одном клипе.

Идея

Маленькая героиня в бумажном мире

Клип для артистки Beku мы делали вместе с МТС, и половина его происходит там, куда камеру не поставишь. Главная героиня — сама артистка, только маленькая, и живёт она в выдуманном бумажном мире: планеты, космос, дома — всё будто сложено из листа бумаги.

Финал переворачивает картинку. Оказывается, это был спектакль: девочка из настоящего мира разыгрывала его для родителей. Всё, что зритель видел до этого, — её представление, поэтому мир и выглядит самодельным.

Что за проект

Музыкальный клип артистки Beku, сделанный совместно с МТС. Живую часть снимали в Казани, анимационную собрали нейросетями.

Мультик внутри клипа

Персонажи

Подготовка длиннее генерации

Персонажа для большого ролика нельзя просто попросить у нейросети — его нужно собрать и закрепить. Каждого героя, каждый объект и кусок окружения мы вырастили из текстового описания, а потом зафиксировали так, чтобы они не менялись от кадра к кадру.

Эта часть работы почти всегда занимает больше времени, чем сами генерации. Пока персонаж не закреплён, каждая новая сцена возвращает другого героя — и склеить их в один фильм уже невозможно.

  • Герои

    Артистка в уменьшенном бумажном виде и остальные персонажи: внешность, пропорции, костюм.

  • Объекты

    Предметы, которые кочуют между сценами и по которым зритель узнаёт мир.

  • Окружение

    Планеты, космос, дома — всё в единой бумажной стилистике.

Закреплённые персонажи, объекты и локации

Режиссура

День до первой генерации

Прежде чем запускать нейросеть, мы разложили клип по сценам: что происходит, с какого ракурса это видно, какой план — общий, средний, крупный. На это ушёл целый день, и ни одной секунды видео за него не появилось.

Зато дальше работа шла по плану, а не наугад: мы знали, сколько сцен нужно, что в каждой должно случиться и как она стыкуется с соседними.

Порядок работы

  1. 01

    Придумали концепцию: бумажный мир, маленькая героиня, финальный поворот со спектаклем.

  2. 02

    Собрали и закрепили персонажей, объекты и окружение по текстовым описаниям.

  3. 03

    Разложили клип по сценам, ракурсам и планам — отдельный день режиссуры.

  4. 04

    Ушли в генерацию: 20 сцен, по три варианта на каждую.

  5. 05

    Отобрали лучшие дубли и отдали 60 роликов на монтаж.

Генерации

Больше 150 генераций за три дня

Сама анимация заняла три дня с утра до позднего вечера. Суммарно по всем сценам вышло больше ста пятидесяти генераций: каждую сцену гнали в трёх вариациях, чтобы на монтаже было из чего выбирать.

Самым сложным оказалось не получить красивый кадр, а удержать единый стиль на протяжении трёх минут и отобрать те дубли, которые складываются в цельную историю.

150+ генераций

Суммарно по всем сценам за три дня работы.

20 сцен

Столько эпизодов собрал сценарий после дня режиссуры.

3 вариации

Каждую сцену генерировали трижды — было из чего выбирать.

3 минуты

Итоговая длина анимационной части клипа.

60 роликов на монтаж

Сбой

Нейросеть удалила проектную папку

В середине работы над генерациями нейросеть, которая управляла компьютером в роли режиссёра, удалила проектную папку и отказалась её восстанавливать.

Выручили копии: сценарий и уже готовые генерации лежали отдельно, поэтому проект собрался заново. Полдня работы всё же встали — и с тех пор мы относимся к резервному хранению серьёзнее.

Когда часть процесса отдана нейросети, копия проекта нужна не «на всякий случай», а по умолчанию.

Монтаж

Шестьдесят роликов и живая съёмка

До монтажа добрались 60 роликов минимум по пять секунд каждый. Их собрали в единую последовательность и смешали с настоящими кадрами артистки — её мы снимали в Казани.

Съёмки и генерации шли параллельно: пока одна часть команды работала с камерой, вторая собирала бумажный мир. На монтаже две линии сошлись в один клип.

Кадр со съёмочной площадки

Артистка Beku

Белла Джанджгава — казанская певица, автор песен и актриса. Создаёт самобытную поп-музыку с сильным акцентом на этнические и традиционные мотивы.

Результат

Три минуты сказки на трек Beku

Получился мультфильм на музыку Beku: бумажная вселенная, в которой маленькая героиня проходит свою историю, а в финале оказывается, что всё это — домашний спектакль для родителей.

Три минуты анимации, три дня работы и параллельные съёмки — всё ради того, чтобы у трека появилась своя сказка.

0:00 / 0:00
Клип целиком