Видео вещей нейросетью: как снять сцену с карманным фонарём
Видео вещей нейросетью на примере карманного фонаря: раскадровка одного действия, исходный снимок и проверка того, что предмет сохранил форму.
Евгений
Дизайнер-партнёр LibraChat
6 мин чтения
На столе лежит карманный фонарь. Рядом сложен лист с планом похода. Я хочу, чтобы к концу кадра на листе появилось круглое пятно света. Тогда зритель поймёт, для чего на столе оставили фонарь, даже если ролик будет идти без звука. Видео вещей нейросетью удобно строить вокруг такого небольшого события. В ходе сцены меняется что-то вокруг предмета, и этот след можно увидеть.
Сначала посмотрим конец
Короткую предметную сцену я бы начал проектировать с последнего кадра. В одном варианте фонарь освещает всю столешницу. Тогда получается просто красивый свет. В другом круг падает на единственную строку в углу плана, в остальной комнате по-прежнему темно. Здесь у света есть назначение. Кто-то собирается свериться с маршрутом.
Я рисую карандашом два прямоугольника для начала и финала. Карандашного кружка достаточно, чтобы указать место светового пятна. На первом прямоугольнике его нет. Между кадрами фонарь слегка поворачивается на столе. Лист закреплён блокнотом и остаётся на месте. Зритель сможет заметить движение по небольшому просвету, который появился между корпусом и углом блокнота.
У других вещей меняется другая деталь окружения.
Предмет в кадре · Что остаётся на месте · Что сообщает о действии
Карманный фонарь — Лист и край стола — Круг света появился возле сгиба
Дорожный будильник — Плед под корпусом — Стрелка дошла до отметки, которая была видна в начале
Если световое пятно может быть главным героем кадра, не стоит одновременно раскрывать бумагу. Два изменения подскажут два события, а короткометражка у меня пока только про одно. Сложенный лист я оставлю так, чтобы на той же стороне были видны несколько цветных штрихов. Читаемый маршрут в этом упражнении не нужен, достаточно изменения освещения.
Подготовка обычной фотографии
Исходный снимок я делаю с той точки, откуда хочу видеть движение. Ставлю вещи на стол и отхожу достаточно, чтобы в кадре был край листа. У фонаря есть три зрительные опоры.
Синяя кнопка находится сверху и немного ближе к голове фонаря.
Передний круглый ободок светлее корпуса и образует отчётливую границу.
У задней части короткая широкая петля, которая лежит вдоль корпуса.
Если передняя часть исчезает в чёрном пятне, я на минуту включаю боковую лампу и переснимаю исходник. В сцене может остаться вечерний свет. Мне важно, чтобы модель получила форму, с которой можно сравнивать будущий кадр. Слишком плотная обрезка тоже мешает. Когда перед фонарём останется пространство длиной с сам корпус, свет сможет дойти до листа внутри кадра.
Свой фонарь я бы оживил через браузер. В LibraChat выберу «Оживление фото» и приложу снимок, где кнопка и петля хорошо различимы. В обзоре нейросетей для видео можно подробнее разобрать работу с описанием сцены. Без исходника тоже получится собрать пробу, если описать предмет, выбрать неподвижную камеру и явно назвать то, что изменится. Я бы взял фото, когда в кадре нужна конкретная вещь из дома.
Запрос для видео вещей нейросетью
Возьми фотографию как начальную композицию одного короткого неподвижного плана. Маленький карманный фонарь слегка поворачивается один раз, оставаясь на столе. Сохрани синюю кнопку сверху, светлое круглое кольцо у переднего края и короткую петлю сзади. В конце мягкий круг света падает на край сложенного листа возле блокнота. Бумага лежит на месте. Камера остаётся на прежней высоте, края стола и блокнота сохраняют положение. В остальной комнате сумерки, никаких новых предметов и надписей.
«Слегка поворачивается» здесь означает небольшую смену направления, после которой пятно света окажется у угла листа. Если в первой попытке свет уже падает на бумагу в начале, поставлю в первом кадре фонарь чуть боком. Когда даже небольшой поворот приводит к смене формы, можно взять более простой вариант, где фонарь лежит, а свет постепенно включается. Действие сохранит смысл и всё ещё изменит вид бумаги.
Узкое место у этой сцены хорошо видно ещё до съёмки. Если положить лист вплотную к фонарю, небольшое движение корпуса выйдет выразительным, а пятно почти не переместится. Если поставить лист слишком далеко, пятно уйдёт за край кадра. Я подвигаю бумагу на столе и телефоном запишу два коротких эскиза с разных расстояний. Движение руки из репетиции в итоговую сцену можно не переносить. Цель пробы в том, чтобы заметить путь света и выбрать, где он остановится.
Есть ещё вариант с неподвижными предметами и смещением луча от внешнего источника. Его можно использовать в истории, где фонарь уже был включён, а в комнату кто-то вошёл и на секунду заслонил свет. В этом случае наблюдаемый след тот же, но протекает сцена наоборот. Пятно исчезает, зритель замечает перемену и ждёт появления человека.
Где искать погрешность в получившемся кадре
Я бы проверял середину ролика с паузой. Проще всего найти её по моменту, когда пятно света наполовину заходит на лист. В этом положении фонарь тоже должен быть узнаваем. Бывает, что первый и последний кадры выглядят ровно, а в движении корпус вытягивается, пропадает петля или появляется вторая кнопка.
Останови просмотр перед движением и найди три опорных детали.
Выбери промежуточный кадр и сравни форму кольца, кнопку и петлю с исходником.
Включи повтор целиком и проследи только за светом. Если он соскальзывает с листа до финала, сократи манёвр или оставь источник неподвижным.
Эта проверка нужна, если рассказ держится на самой вещи. Для семейного ролика простая ошибка тоже заметна: у знакомого фонаря есть свой потёртый край и привычная петля, их запоминают. Если важна точная внешность вещи в каждом кадре, лучше снять действие обычной камерой и использовать нейросеть для раскадровки. Так рисунок сцены остаётся полезным даже при прямой съёмке.
Я закончу сцену спокойным бликом, который держится достаточно долго, чтобы прочитать сложенный лист как знакомый предмет. Если в кадр просится «киношная» тряска или облёт, сначала остановлюсь на одном вопросе. Виден ли свет, который включился, и понятно ли, что освещено? Обычно этого движения уже хватает.
Прямо сейчас возьми небольшую вещь и открой LibraChat. Выбери соседний предмет, на котором действие оставит след, и составь два кадра. Возможность генерации видео для своего режима сверь на странице тарифов.