Я перепрогнала промпт пару раз, потом переписала его:

Но спустя 6 попыток устала и я, и сама нейронка:

Так как цель этого видео -- быть опубликованный в инстаграм как рубрика, а не как продающий ролик, я решила не тратить дальше впустую и кредиты на генерации, и своё время, и предложила smm-щице адаптирвоать то, что получается, под её цели. У меня получилось видео, где нейро-мужчина просто поднимает ноги и это может выглядеть как упражнение на пресс:

Но, разумеется, не в таком виде. Один из самых важный навыков в генерации видео в нейросетях -- это подшаманивать его в пост-продакшене. Ну, т.е., обрезать все моменты, которые явный кринж, и зациклить, если получилось слишком коротко. По итогу smm-щица популярного WB-бренда БАДов и спорт-пита получила от меня и опубликовала вот такое видео:

В итоге, конечно, мы решили отказаться от идеи делать видео с упражнениями в нейронках, а снимать их по-настоящему, потому что, во-первых, на их генерацию ушло больше времени, чем ожидалось, а во-вторых, имеет смысл делать в нейронках тот контент, который ты не можешь снять в реальной жизни из-за:

1. ограничения бюджета -- например, мы не можем выделить пару тысяч баксов на съёмку сюжетного ролика -- с арендой помещения, с наймом съёмочной команды, арендой техники и света и т.д.

2. ограничений самой реальности 😁 -- например, никакими химическими реакциями мы не можем заставить порошок BCAA или капсулы ZMA искриться молнией.

Поэтому я сосредоточилась именно на таких генерациях. Покажу в следующем посте! Пока ещё думаю, что первым -- сюжетное или с молниями/прочими эффектами?

Ряды Видеогенераторов снова пополнились, ведь кроме Kling, Runway GEN-3, Luma Dreame Machine, появилась Hailuo AI MiniMax

Hailuo AI MiniMax — генератор видео, созданный при поддержке Alibaba и Tencent. Генерировать видео можно как по тексту, так и приложив изображение. Ролики получаются длительностью 6 секунд, разрешение 1280×720, скорость 25 кадров в секунду

Больше полезной информации в телеграм-канале

Почему Hailuo AI MiniMax наделал столько шума:

Hailuo AI MiniMax заочно прозвали лучшим инструментом для создания видео на базе ИИ для кинематографистов, особенно с появлением функции image2video. Т.е. загрузив изображение, можно создавать вокруг него видео, дополненное движениями камеры, анимацией объектов и переходами между сценами - ничего нового, но качество картинки киношное.

Помимо этого, сервис классно генерирует ролики с человеческой сменой эмоций - примеры во вложении. Подобные видео наделали шума из-за своей реалистичности -  модели как и их эмоции, не отличить от настоящих. Все примеры можно посмотреть в X.

Вот промпт: Over the shoulder shot of a woman’s close up, at first she is laughing, then she becomes sad, then she starts to cry, then she cover her face with her hands

Что крутого в Hailuo AI MiniMax:

• На сайте можно авторизоваться через Google-почту.

• Дают 3-дневный пробный период:

В качестве приветственного подарка для новых пользователей вам дарят 3 дня неограниченного доступа. В течение этого времени вы можете создавать столько видео, сколько захотите, без каких-либо ограничений по кредитам. По истечении 3 дней вы перейдете на наш бесплатный тарифный план, где количество видеороликов, которые вы сможете создать, будет зависеть от оставшихся у вас кредитов. Так что поторопитесь сейчас, кто хочет протестировать нейросеть.

• Есть функция улучшения промпта. Если эта функция включена, ваши подсказки будут автоматически уточняться и превращаться в более подробные описания для повышения качества генерации. Вы также можете отключить эту функцию, чтобы модель более точно следовала вашим подсказкам. В этом случае для достижения оптимальных результатов рекомендуется давать более подробные подсказки.

• Помимо text2video есть image2video: можно приложить изображение референс и написать подсказку, у меня получилось видео неплохого качества.

• Одновременно бесплатно можно генерировать до 3-х работ

• Хорошо работает с текстом - не хуже основных конкурентов:

Что не круто в Hailuo AI MiniMax:

• В отличие от Kling нельзя использовать длинные промпты

• Ждать генерации в порядке очереди нужно минут 15. Платные тарифы, а с ними и быстрые генерации видео, начинаются от 10$/мес, тогда же можно поставить создаваться 5 видео, и становятся доступно создание одновременно 2-х видео

Отличие от Runway Gen-3, Kling AI и Luma Dream Machine

Runway Gen-3, Kling AI и Luma Dream Machine, предлагают схожую функциональность, но MiniMax выдает более кинематографическое качество, особенно когда дело доходит до обработки подробных подсказок. Runway Gen-3 - известен своим качеством, Luma хвалят за скорость. Hailuo AI MiniMax обеспечивает баланс между этими факторами, предлагая как качество, так и творческий контроль. Очень хорошо понимает сложные подсказки как Kling AI.

Kling - китайский аналог Sora. Однако сейчас заметна тенденция перещеголять Runway. Сами посудите:

• Как и Runway GEN-2 встроили инструмент Motion Brush для движения отдельных объектов в свою модель KLING 1.0. В KLING 1.5. пока такой функции нет, как и в новом GEN-3.

• KLING так же как и Runway сделали доступным API.

• Скоро в KLING добавят ИИ редактор видео, и будет вообще китайский конкурент Runway. Итак, остановимся на обновлениях.

Новые обновления Kling:

Новая функция синхронизации губ

Встроенная функция синхронизации губ создает невероятно естественный эффект при загрузке закадрового голоса, даже немного отдаленного персонажа:

или песен, создавая впечатление, что персонаж действительно говорит или поет:

Как работает липсинк:

• Генерируете видео в Kling или модно использовать ранее сгенерированный (а то я до сих пор жду когда мое видео обработается) 

• Выбираете видео и под ним нажимаете кнопку «Match Mouth Type»

• Загружаете аудио - можно песню и Kling AI подгонит движение губ.

Советы по взаимодействию и ограничения:

• Работает в версиях Kling 1.0 и с Kling 1.5

• Подходит для говорящих персонажей и для песен

• Не работает липсинк понятное дело там, где нет лица, например Дарт Вейдер, или на животных. Еще если отсутствует постоянно видимое лицо, или лицо часто уходит с экрана.

• Однозначно классно, что теперь на одной платформе можно сгенерить видео хорошего качества и там же озвучить его

Больше полезного в моем телеграм канале с проверенными инструментами для бизнеса, учебы и работы.

Новый раздел «Сообщество

На официальном сайте появился новый раздел «Сообщество». Там можно делиться своими творениями, и одна работа может принести до 666 бесплатных кредитов! 

API сервисы доступны всем пользователям

Вслед за Luma и Runway, API KLING теперь доступен без списка ожидания! Через API теперь можно получить доступ к генерации видео, изображений, и виртуальной примерочной Virtual Try-on.

Я решила сгенерировать видео в бесплатной версии KLING 1.0, но, к сожалению, мой ролик до сих пор обрабатывается (видно на скрине), а видео, что у меня были, не подходят для липсинка - лицо постоянно двигается:

UPD: прошел час, изменений никаких:

Поэтому любителям бесплатных тарифов, как я, придется запастись терпением. Или посмотреть примеры и подробнее ознакомиться с обновлениями можете здесь. А свой результат, я надеюсь, дождусь и поделюсь им позже.

Хотите узнавать о полезных сервисах с искусственным интеллектом для работы, учебы и облегчения жизни? Подписывайтесь на НейроProfit, там я рассказываю, как можно использовать нейросети для бизнеса.