Нейросеть видео по запросу: как описать один понятный кадр
Нейросеть видео по запросу лучше понимает сцену, когда разделены внешний вид и движение. На примере лейки и рассады разбираю промпт, правку и проверку ролика.
Евгений
Дизайнер-партнёр LibraChat
6 мин чтения
Нейросеть видео по запросу может показать, как вода из лейки попадает в горшок с рассадой. Если написать только «красивое видео о растениях», модель сама выберет предметы и движение, и лейка может оказаться за кадром. Для короткого анонса мастерской мне нужен один ясный эпизод: рука наклоняет лейку, вода льётся в землю, камера остаётся на месте. Такой запрос проще проверить и исправить, чем длинный сценарий из пяти действий.
Что должно быть в текстовом запросе?
Руководство Runway по text-to-video выделяет два ядра промпта: описание того, что мы видим, и описание движения. Для нашего кадра это горшок с рассадой на столе, мягкий боковой свет, рука с небольшой лейкой; действие — короткий наклон и ровная струя воды. Я добавлю неподвижную камеру, потому что мне важно видеть момент полива, а не проезд вокруг стола.
Разделю запрос на четыре строки:
В кадре: один горшок с молодой рассадой на столе, лейка и рука.
Действие: рука медленно наклоняет лейку, вода попадает только в землю.
статичный средний план, предметы остаются видны до конца.
Свет: мягкий дневной, без смены времени суток внутри фрагмента.
Готовая формулировка для самостоятельной пробы: «На деревянном столе стоит горшок с рассадой. Рука медленно наклоняет маленькую лейку, тонкая струя воды попадает в землю у стебля. Камера неподвижна, средний план, мягкий свет из окна. Горшок и рука остаются в кадре». Это пример промпта, не описание реально полученного мной ролика.
Не начинаю с точных отметок каждой секунды. Для простого полива достаточно понятного порядка: лейка наклоняется, вода попадает в грунт, движение заканчивается. Когда этот ход работает, можно уточнять скорость. Слишком плотный сценарий на несколько секунд часто создаёт лишние действия. Тогда сложнее проверить, что именно пошло не так. Я экономлю попытки, оставляя один главный глагол: «поливает».
В заметках к сцене отдельно держу будущий титр. Название мастерской и время занятия не должны быть частью сгенерированного движения: если расписание изменится, титр можно заменить без нового ролика. Это особенно удобно для серии анонсов. Один проверенный кадр служит основой, а фактические сведения добавляются в монтажной программе и сверяются перед выпуском.
Нейросеть видео по запросу: где попробовать текстовый режим?
В LibraChat путь к ролику начинается с вкладки «Изображения»: там выбирают тип «Видео» и описывают сцену. В браузере пункт видеогенерации из чата ведёт в этот раздел; в приложении из обычного чата видео не запускают. Я бы проверил доступный режим на безопасной вымышленной сцене, а перед серией посмотрел текущие тарифы: видео доступно не на всех планах, число попыток зависит от условий. Готовые ролики находятся в «Моих видео» и могут быть скачаны.
Runway Gen-4.5 поддерживает текстовый путь и отдельный путь с исходным изображением. Для нашей задачи без фотографии подходит первый. Adobe Firefly также описывает генерацию видео из текста. Выбор сервиса определяется доступом, форматом нужного фрагмента и удобством дальнейшего монтажа. Я не приписываю одному инструменту результат другого и не называю победителя без одинакового теста.
Если исходник · Что дать модели · Что проверить
Только текст — Предмет, окружение и одно движение — Все предметы появились в кадре
Готовая иллюстрация — Изображение и главным образом движение — Вид исходного кадра не изменился
Реальное фото изделия — Фото с разрешением владельца и движение — Товар остался тем же
Эта таблица помогает не смешивать два режима. В видео из фотографии кадр уже задаёт внешний вид; в видео из текста описание должно сделать эту работу. Для точного товара лучше снять реальный ролик или проверить каждую деталь после генерации.
Как править промпт после первой попытки?
Сначала смотрю ролик без музыки. Видно ли, откуда льётся вода? Сохранилась ли лейка? Не выросло ли растение за секунду? Если струя попала мимо горшка, не переписываю весь запрос. Уточняю действие: «Носик лейки расположен над почвой справа от стебля; вода льётся вниз в горшок». На двух файлах отмечаю, куда теперь попадает струя. Правка должна исправить один дефект, а не случайно сменить цвет и ракурс всей сцены.
Для проверки оставляю себе три кадра: начало, момент полива, конец. На них отмечаю положение горшка, лейки и руки. Если предмет меняется между кадрами, фрагмент не подходит для анонса реальной мастерской. Движение может быть плавным, но без достоверного действия зритель не поймёт, что происходит. Честнее снять настоящий полив на телефон, чем использовать синтетический ролик с исчезающей лейкой.
Полезно задавать позитивное движение вместо длинного списка запретов. Рекомендации Runway советуют описывать желаемое действие прямо и понятно. Поэтому «камера неподвижна, средний план» лучше расплывчатого «не делай странных движений». В первом случае у модели есть конкретная сцена. Во втором остаётся только отрицание без нужного кадра.
У ролика есть ещё практическая граница: вода и почва должны вести себя правдоподобно. Если струя проходит через край горшка или земля остаётся совершенно сухой, зритель заметит странность даже без специальных знаний. Я проверяю физическое действие, а не только плавность кадра. В учебном материале такая ошибка особенно вредна: он должен показывать, куда действительно лить воду.
Если первая версия вообще не напоминает нужную мастерскую, возможно, проблему лучше решить исходным кадром. Собственная фотография горшка задаст форму и место действия, а запрос сможет сосредоточиться на движении. Но тогда появляется вопрос разрешения на загрузку снимка и проверки того, что его детали не исказились. Переход к фото не делает задачу автоматически проще; он меняет тип контроля.
Что сделать до публикации?
Сгенерированный фрагмент ещё не готовый ролик для события. Ему могут понадобиться дата, название мастерской и звук. Эти сведения я добавил бы в редакторе поверх проверенного кадра, чтобы исправлять их отдельно. Если видео создавалось из реальной фотографии, нужны права на исходник. Если в кадре есть человек, я проверяю согласие на использование его изображения.
Мой финальный контроль короткий:
Предметы и действие узнаваемы без объяснения автора.
Между началом и концом не исчезает важная деталь.
В кадре остаётся место для настоящей даты и названия.
Ролик не выдают за съёмку события, если сцена сгенерирована.
Составь сейчас один запрос из четырёх строк и попробуй получить короткий фрагмент, если нужный режим доступен. Для подготовки статичного кадра можно использовать схему промпта для изображения. После просмотра не проси модель «улучшить всё»; назови один видимый дефект и проверь, исправился ли он. Так запрос становится рабочим инструментом, а не надеждой на случайную удачу.
генерация видеотекст в видеопромптRunwayAdobe FireflyLibraChat