Какие популярные клипы связаны с нейросетью. Сравниваем Washed Out, Linkin Park и The Beatles, чтобы понять, где ИИ менял видео, а где помог разобрать запись.
Евгений
Дизайнер-партнёр LibraChat
6 мин чтения
Открой три популярных клипа с нейросетью и сравни, в каком месте технологии вообще пересекаются. У Washed Out Sora делала материал для непрерывного движения сквозь воспоминания. У Linkin Park команда Kaiber указана в производственных титрах анимированного клипа. В релизе The Beatles технология понадобилась, чтобы отделить записанный голос Джона Леннона от фортепиано. Снаружи все три случая легко назвать ИИ-клипами. Для просмотра и для собственной работы разница существенная.
Я предлагаю сначала нажать паузу на одной смене сцены. Что там нужно было уметь команде? Получить изображение, выдержать стиль или сохранить исходную запись? Потом открывай описание. Так у тебя будет не только список роликов, но и способ понять, что из увиденного можно взять в работу.
Популярные клипы с нейросетью и их авторы
Клип · Роль технологии по первоисточнику · На что взглянуть
Washed Out — The Hardest Part — Sora использована для визуального материала — Как направление движения связывает разное время и места
Linkin Park — Lost — В описании клипа есть отдельные кредиты AI Production с Kaiber — Как анимационный стиль объединяет смену планов
The Beatles — Now And Then — В материалах о песне MAL указана как технология разделения звука — Как архивные кадры соединены с завершённой песней
У Washed Out опубликован клип The Hardest Part. В подписи Пол Трилло указан режиссёром и монтажёром. Объявляя релиз, лейбл объяснял его замысел как непрерывное приближение через историю пары на протяжении нескольких десятилетий. В такой постановке движение в кадре превращается в способ рассказать о времени. Сообщение издателя Sub Pop.
Когда я разбираю этот приём, меня интересует место соединения. За секунду до перехода можно назвать элемент, к которому движется камера. После перехода ищу следующий ориентир. Если движение продолжается, монтаж скрепляет сцены даже при смене людей и помещения. Хорошая учебная проба тут коротка: от двери на улицу и от улицы к новому месту. Одного связующего движения хватит, чтобы проверить замысел.
Linkin Park. ИИ среди других ролей команды
Официальный Lost выпущен к переизданию Meteora. В подписи клипа есть отдельный блок AI Production, в котором указан Kaiber вместе с другими участниками. Параллельно на странице названы режиссёры и творческая команда. Это хороший случай, чтобы отделить документированную роль модели от догадки по внешнему виду кадра.
Я бы выбрал для сравнения два соседних плана. Пусть камера или персонаж меняют положение. Что удерживает ощущение одной истории? Можно сравнить характер контура, контраст и то, как меняется темп движения. Этот вопрос полезен независимо от способа производства. Заодно становится видно, что один необычный кадр без последовательности ещё не даёт связного музыкального видео.
Сохранить из такого разбора я предложил бы решение о границе стиля. Если в первом плане герой почти сливается с фоном, а в следующем становится очень контрастным, проверь, совпадает ли перемена с музыкальным акцентом. Один крупный план может специально отличаться от соседних. Другое дело, когда очертания меняются беспорядочно и взгляд уже не понимает, за кем следить. Тогда достаточно переделать один стык или подобрать ему кадр с понятной фигурой.
The Beatles. Нужным исходником был голос
В истории релиза Now And Then группа описывает, как команда Питера Джексона с помощью MAL выделила исходное исполнение Леннона из домашней записи. Авторство и вокал остались у музыкантов, новые партии записывали для завершения песни. Музыкальное видео вышло отдельно; в рассказе режиссёра о нём перечислены найденные архивы и новые съёмки Пола и Ринго. Рассказ Питера Джексона о работе.
Для меня тут интересен порядок задач. Сначала нужно было получить доступ к тому, что уже прозвучало и сохранилось на ленте. Затем видеоряд работал с архивом. Если пропустить первый шаг, легко решить, будто старый вокал в клипе напели заново. Страница релиза объясняет, откуда взялся голос, лучше любого впечатления от просмотра.
Как смотреть клип, когда ищешь приём для своего видео
Возьму вымышленную сцену. В песне о переезде рассказчик в куплете закрывает дверь дома, а в припеве впервые входит в новую комнату. Хочется связать два кадра приближением к дверной ручке. Я бы решил, что должно остаться узнаваемым по обе стороны стыка: размер ручки в кадре и направление движения. Цвет комнаты и сама дверь могут поменяться. Так пример из клипа становится задачей для конкретного перехода.
Запиши название страницы, где указаны авторы видео и технологии.
Выбери короткий переход, под который подходит фраза твоей песни.
Назови предмет, который сможет связать планы, и только затем выбери съёмку, генерацию или монтаж из архива.
Приложи к своему черновику две картинки соседних кадров и проверь, понимает ли другой человек, куда движется взгляд.
Если техника интересует сама по себе, есть объяснение, что делает нейросеть для видео. Для музыкального фрагмента ещё полезно держать отдельную запись, откуда взялся материал.
Чтобы выбрать между двумя стыками, я сначала слушаю участок песни без видео. Если переход в музыке слышен только через пару секунд, подольше держу исходный план. Если уже на первой ноте припева меняется ощущение пространства, пробую поставить склейку на неё. Так сравниваю версии по музыке, пока красота отдельно взятого кадра не успела решить всё за меня.
Для исходной песни отмечаю авторов и версию записи.
Для референса сохраняю ссылку и описание одного приёма.
Для собственного монтажа подписываю, какие кадры сняты, какие сгенерированы и где лежат исходные файлы.
Как записать монтажное задание
В LibraChat я занёс бы две строки из раскадровки со входом и выходом из сцены. Если записи хранятся в документе, проверь условия загрузки файлов. Промпт можно вставить как сообщение.
Для песни о переезде опиши два соседних кадра длиной по три секунды. Первый заканчивается крупным планом старой дверной ручки. Второй начинается с ручки в новой комнате. Сохрани направления взгляда и движения. Отдельно назови одну деталь, по которой зритель заметит смену места, и одну, по которой узнает, что движение продолжилось.
Прямо сейчас выбери один из клипов и остановись на первом переходе, который захотелось пересмотреть. Запиши, что видишь до него и что меняется после. Сохрани ссылку рядом с этим наблюдением. Для первой пробы достаточно одного перехода под свою песню.