Видео-фантазии от нейросети: одно чудо в обычном кадре
Видео-фантазии от нейросети можно собрать вокруг одного необычного события. Лист бумаги превращается в окно, а постоянные детали помогают зрителю это понять.
Евгений
Дизайнер-партнёр LibraChat
6 мин чтения
На письменном столе лежит обычный белый лист. Сверху падает свет от лампы. В центре бумаги открывается маленькая квадратная прорезь, из неё поднимается облако размером с яблоко. Если в тот же момент стол превратится в скалу, я могу не успеть понять, что именно сделал лист. Видео-фантазии от нейросети часто запоминаются одной деталью. Для моей сцены всё остальное пусть проживёт эти несколько секунд как обычно.
Коротко: выбери один предмет и одно невозможное событие. В начале дай зрителю узнать предмет, в середине покажи превращение, в конце оставь его видимый след. Сохрани ракурс и два ориентира, чтобы зритель понимал, где произошло изменение.
Как выбрать одно событие для фантастической сцены?
У меня в списке были лист, чашка, лампа и ключ. Первый набросок получился шумным. Лист приподнимался, из чашки росло дерево, лампа превращалась в луну. Если всё это поместить в короткий ролик, глазу придётся решить, на какой предмет смотреть. Я бы сохранил лист. У него ясная плоскость и хорошо видимые края. На такой плоскости особенно неожиданно увидеть окно в объём.
Для первого кадра положу бумагу на деревянный стол под небольшим углом. Верхний правый угол загнут. Рядом виден простой жёлтый карандаш. Эти две вещи станут ориентирами. Пока они остаются на местах, зритель может понять, что облако вышло именно из бумаги, а не появилось после смены сцены.
Придумай себе четыре условия.
Что человек успевает узнать до превращения. У меня это лист и карандаш.
Какое новое действие нарушает обычный порядок. Из маленького отверстия выходит облако.
Какие две детали останутся на своих местах. Я оставляю карандаш и загнутый угол.
Что изменится к концу. На бумаге останется прорезь, у облака появится мягкая тень.
Самая трудная часть здесь — вовремя остановиться. Можно заставить облако вырасти и вынести лампу из кадра, но так у сцены появится новое действие. Я выберу короткий финал. Облако остановится над бумагой. Тень останется на столе и покажет, что теперь у нас над плоским листом есть объём.
Как записать видео-фантазии от нейросети в трёх моментах?
Я описываю начало и конец так, чтобы их можно было нарисовать отдельно. Середина связывает эти два состояния. Если на первом эскизе лист стоит боком, а на последнем виден под другим углом, в запросе уже появилось движение камеры. Уберу его из первой версии. Для одного сюрреалистического события смена точки зрения иногда выглядит как скрытый монтаж.
Момент · Что видим · Что должно остаться тем же
До — Плоский лист с загнутым углом — Карандаш справа, тёплый свет сверху
Во время — В центре листа открылась прорезь, вверх поднялось облако — Края листа и ракурс камеры
После — Тень облака видна на бумаге и столе — Прорезь в том же месте, вокруг нет новых предметов
Последнюю строку легко проверить по одному стоп-кадру. Для середины понадобится посмотреть движение. Иногда облако уже висит, когда прорезь ещё закрыта. Тогда рисунок формально содержит нужные элементы, но загадка выглядит иначе. Можно написать в запросе, чтобы сперва открылась прорезь и только потом из неё показался нижний край облака. Общих слов о магии я в этот момент не добавляю.
Как сформулировать сцену для модели?
В LibraChat новую сцену по описанию можно сделать в типе «Видео» раздела «Изображения». Перед запуском я проверю, доступен ли режим по моему плану. Тарифы LibraChat. Если сначала хочется понять принцип создания таких кадров, пригодится разбор генерации видео. Для фантазии с листом мне хватит вот такой постановки:
Горизонтальный короткий план деревянного стола сверху под небольшим углом. На столе один белый лист с загнутым верхним правым уголком и один жёлтый карандаш справа. Тёплая лампа даёт ровный свет сверху. Сначала лист целый. Затем в центре бумаги плавно открывается маленькая квадратная прорезь. Из неё поднимается белое облако и останавливается над листом. Под облаком появляется мягкая тень. Карандаш, края листа и камера сохраняют положение. Новых предметов, вспышек и смены плана нет.
После чтения запроса я замечаю, что не задал цвет стены. В этом кадре она вообще не нужна. Лучше потратить одну строку на то, где находится прорезь. Чем ближе я держусь к видимой сцене, тем легче понять, какой фрагмент потом просить изменить.
Что делать, если получилось слишком много чудес?
Я сравню начало и конец. Сначала отмечу, какие вещи изменились без моей просьбы. Если стол поехал, карандаш сменил цвет, а облако раздвоилось, выберу одну правку с самым заметным эффектом. Для истории с листом важнее остановить камеру и сохранить размер бумаги. Цвет карандаша можно проверить позже.
Дальше сделаю три короткие пробы.
Покажи начало отдельно. Зритель должен успеть назвать обыденные вещи.
Следи за прорезью. Через неё облако должно действительно появиться, а не вырасти уже рядом.
Оставь конец на паузе. На одном кадре должно быть видно, какая деталь изменила всю обстановку.
Если до появления облака лист лежит всего один нечитаемый миг, подберу другой отрезок или попрошу короткую остановку в начале. Добавлять вступительную схему поверх видео я бы не стал: действие должно читаться без пояснений. Если сюжет потерялся, уменьшение задачи чаще помогает быстрее, чем ещё одна декорация.
На отдельном рисунке я бы ещё проверил тень. Если она уже видна в первом кадре, зритель может решить, что облако висело над столом всё время. Если тени нет и в финале, облако легко принять за рисунок на листе. Я намечу тень той же формы, только мягче, и попробую оставить прозрачное место между ней и облаком. Этот просвет помогает увидеть объём без дополнительного движения. Для другого фантастического предмета ту же роль может сыграть отражение в стакане или свободное пространство между краями страниц. Важен конкретный след, который появился после перемены и был невозможен в начале.
Прямо сейчас открой LibraChat и запиши три короткие строки о своём предмете. Что было перед переменой? Что он сделал необычного? Какой след остался? Я начну с карандаша и листа, чтобы зритель успел узнать стол. Потом из плоской страницы выйдет облако. Для первой пробы этого уже достаточно.