kanjoprod

И возникла у меня идея – а почему бы не попробовать сгенерировать каких-нибудь кадров для полноценного музыкального клипа? Ну а что, нынче многие музыканты наснимут чего-нибудь рандомного, смонтируют и их слушатели получают клип. Круто же!

Танцевать с бубном и искать способы оплатить Veo3 мне не пришлось –  весьма быстро нашелся довольно дешёвый тг-бот (рекламировать не буду). Поскольку я поклонник фильмов «Брат» и «Брат-2», первые же генерации я решил сделать в духе этих киношедевров. Проба электронного пера, так сказать. Через Grok придумав несколько промптов, я отправил их боту.

Уже через пару минут я получил кадры в разрешении 720p. Какого-либо сюжета у меня не было, плана, что генерировать, тоже, поэтому данные кадры остались «без дела». Вот, например:

Получился то ли Брат, то ли сериал Аутсорс... А ведь генерации неплохие, учитывая, что это даже не пришлось снимать! Хотя поведение героев с сигаретами, например, вызывает вопросы. Итак, в руках у меня оказался инструмент, о котором я мечтал в детстве...

К энергичной песне, для которой я и хотел сделать клип, такие кадры вряд ли бы подошли, потому я решил продумать хоть какую-то концепцию клипа и заранее придумать промпты для генерации кадров. Ничего умнее концепции "главный персонаж + манекен", отражающей тему "абьюза" (песня поётся от лица абьюзера), мне в голову не пришло. Настало время генерировать!

На вопрос "А где тут сами музыканты" ответит кадр с телевизором, транслирующим хромакей. В него я при монтаже решил всё таки вставить некоторые кадры живого выступления. Так, для динамики.

Выглядит странновато? Странновато. А значит это то, что нам надо!

Впрочем, самое странное Veo3 выдала в кадре, в котором главный персонаж танцует в ночном клубе с манекеном. И если первые несколько секунд ещё похожи на реальную видеозапись, то ближе к концу начинается сюр, который и в боди хоррорах не снимут, и при температуре +39 не приснится:

В припеве я решил так же добавить несколько коротких стоп-кадров, которые мне помогла сгенерировать та же Midjourney. Опять танцы, опять манекен. При генерации получались четыре картинки, в итоге за несколько подходов получилось наскачивать несколько неплохих кадров. Использовал этот промпт:

a man in his 20s, with a solid build, with a week-old unshaven face and a deep, sometimes distant look, dressed in a dark gray turtleneck and blue jeans, black sneakers on his feet, dancing with a mannequin of a blonde woman, background of a party, by Philipp Lorca di Corcia, motion blur --style raw --ar 16:9

Получив по разным промптам не особо сюжетную, но вполне концептуальную (насколько это возможно для не самого умного по задумке творчества) картину из 15 видеофрагментов, я открыл Sony Vegas и начал творить.

Качество видеофрагментов в 720p и слегка меняющаяся внешность у персонажей, да и неточность промптов, не позволили сделать полноценный видеоклип, который можно на флешке носить по муз-тв и прочим телеканалам. Но от процесса я получил удовольствие, а от результата - изрядную дозу кринжа. В хорошем смысле, конечно же.

Функцию, позволяющую делать видеоролики из референса (загружаемой картинки или фотографии), а так же запоминать лица персонажей, в Veo3 завезли лишь недавно (и в тг-боте, который я использовал, это вряд ли будет), поэтому эта нейронка ещё покажет себя в чьих-либо музыкальных клипах или рекламе. А мы, пожалуй, видеокамеру лучше купим...

Ну и результатом не могу не поделиться. Возможно, это смешно. Тут и кадры, напоминающие Ходящих мертвецов, и тюрьма, и манекены, и чего только нет:

Для удобства продублировал на Ютубе:

Как-то так. Спасибо за внимание!