Как сделан клип на песню «SpinnenMann» («Человек-Паук» на немецком)
Здесь только кусочек клипа, а весь клип идёт 4 минуты, он есть на рутубе - https://rutube.ru/video/1c75484ba7cbe512c865b8e33d624a1f/
Расскажу как делал, вдруг кому пригодится.
С помощью ИИ уложился в 2500 рублей примерно.
Из реальной жизни использована фотка автора текста песни – его я сделал гитаристом-солистом. Всё остальное рисовал ИИ.
Т.к. доступ к ИИ в России ограничен – пришлось пользоваться посредником в лице бота в телеге - @syntxaibot и их сайт ещё пригодился https://syntx.ai/
Некоторые нужные виды ИИ есть только в боте (например шевеление губами), но в боте для каждой новой генерации приходилось загружать фотки каждый раз заново, а их сайтик удобен тем, что для новых генераций можно выбирать из ранее загруженных фоток и из ранее сгенерированных.
Для создания видео нужна начальная фотка – её делал чаще всего с ИИ Nano Banana Pro (2 токена, примерно 6 рублей).
Т.е. берём фотку реального человека, говорим ИИ во что одеть персонажа, или загружаем образец как должен выглядеть персонаж, получаем красиво одетого певца, можно с микрофоном. Это базовая фотка персонажа.
Далее этого певца с базовой фотки можно с помощью ИИ засовывать в разные локации. Получаем фотки начальных кадров для видео.
Видео (в тех местах где не надо шевелить губами персонажа) делал чаще всего с ИИ Google Veo 3.1 fast (19 токенов, примерно 60 рублей) – создаётся 8 секунд видео по фотке и промпту.
Но т.к. у нас клип, а в клипе персонажи должны петь, то сначала отделил вокал через сайт https://mvsep.com/ru/home
Затем в звуковом редакторе вырезал небольшие отрывки вокала – секунд по 10 – сохранял их на диск в mp3 и далее анимировал персонажа через бота в телеге: в разделе Видео выбирал HeyGen или HEDRA – туда надо загружать начальную фотку для видео и mp3 с чистым вокалом. HeyGen очень эмоционально анимирует персонажа, HEDRA шевелит в основном только головой и губами. Хедра стоит примерно 10 рублей за 1 секунду видео.
Часть видео и фоток конечно пойдёт в мусорку, у меня примерно половина не получилась как задумано.
Получившиеся кусочки видео накладываем друг на друга с переходами в любом видеоредакторе.
Сама песня сначала была написана на русском, Suno сочинил ей такую музыку, что захотелось послушать как оно будет на немецком, поэтому перевели на немецкий (помогал переводить ИИ Клауд Соннет).
Хочется теперь фильм снять, но дороговато… подожду может подешевеют через годик-другой.
