Ангел и Демон — AI Анимация
👼Телеграм - 🎥TEXT2VIDEO
👼Телеграм - 🎥TEXT2VIDEO
Ну что ж, мы скоро станем еще на шаг ближе к созданию фильмов без актеров 📽
Alibaba показали сервис Emote Portrait Alive для анимации говорящих портретов. Технология так же основана на модели диффузии Audio2Video, но, в отличие от других нейросетей в том, что она не просто оживляет изображения, а наделяет их эмоциями, делает переходы между кадрами более плавными, а сам “анимируемый” остается похожим на себя.
То есть тут не будет как в D-ID компьютерного рта, который убивает “личность” персонажа. А сам ролик выглядит гораздо реалистичнее
Достаточно загрузить одно фото и к нему аудиофайл, и нейросеть реалистично подстроит движение губ и эмоции персонажа. Посмотрим, что будет в итоге, надеюсь, это будет лучше липсинка у Pika Labs, который не очень-то и синхронизирует движение губ при использовании русского языка.
В любом случае, код выложат позже на github , так же пробная версия будет на huggingface, а значитможно будет бесплатно поюзать эту нейросеть, что уже плюс, так как и D-ID и Pika Labs платные. А в D-ID я вообще еле отменила подписку, каждый день пытались списать деньги, хоть карту меняй) Так что ждем бесплатный инструмент.
Хотите узнавать первыми о полезных сервисах с искусственным интеллектом для работы, учебы и облегчения жизни? Подпишитесь на мой телеграм канал НейроProfit, там я рассказываю, как можно использовать нейросети для бизнеса.
Телеграм - 🎯 Нейро-Пушка
Телеграм - 🎥Text2Video
В этом видео мы погружаемся в атмосферу 90-х годов благодаря технологиям искусственного интеллекта! Это первый ролик бета-тестера Runway GEN-2. Оригинал на YouTube
А как сделать видео из изображений в Runway GEN-2 я показывала в этом посте
Автор воссоздал культовые рекламные ролики курицы и вафель, привнося нотку ностальгии в современный мир.
Видео переведено с сохранением голосов с помощью нейросети Elevenlabs. Больше полезной информации как использовать нейросети для бизнеса, работы и учебы в моем телеграм канале НейроProfit
Из горизонтального видео легко сделать вертикальное с помощью CapCut, а вот как быть с обратной ситуацией? Вот у меня есть вертикальный ролик для Tik-Tok, мне нужно сделать из него видео с разрешением 16:9:
Как это сделать? На помощь придет Pika Labs. Все, что потребуется - ввести необходимый промпт, и ИИ автоматически расширит картинку, генерируя недостающие объекты. Попробуем!
Заходим на сайт Pika Labs
загружаем вертикальное видео, которое нужно расширить:
3. Нажимаем Expand Canvas, выбираем нужный размер, перетаскиваем влево-вправо-в середину вертикальное видео. Я выбрала поставить вертикальное посередине и написала промпт "торшер слева диван справа" на английском и размер 16:9:
4. Нажимаем на кнопку рядом с промптом в виде звездочки и получаем видео нужного размера:
Так что не обязательно видео перемещать либо в левый угол, либо в правый, вы вполне можете поместить вертикальный ролик посередине и получить хороший результат.
Нейросеть дорисовывает все, что справа. Результат тоже хороший
- на бесплатном тарифе мне удалось сгенерировать только три 3-секундные видео
- изначально видео у меня длилось 7 секунд, Pika Labs обрезал его до 3-х
- Звук тоже пропал
Инструмент хорош, я бы посоветовала обрезать ваше вертикальное видео на несколько трехсекундных, и по очереди бы расширяла с одним и тем же промптом, а потом заново собрать, движение губ он не трогает.
Если хотите делать такие же крутые изображения и использовать Midjourney на полную мощь, вступайте в Закрытый клуб Midjourney, курс мощно обновлен и с 1 февраля будет подорожание. Все ученики получают обновления по курсу бесплатно и навсегда состоят в чате с единомышленниками и с уроками, так что есть смысл начать оучаться по привлекательной цене. Так же, бонусом, я добавила урок по созданию СЕРИИ киношных изображений, наверняка все видели сгенерированные нейросетями трейлеры в YouTube? Я про те, которые круто сделаны. Так вот, они сделаны из качественных референсов. И та-да 🎉 Вы научитесь создавать реальные киношные снимки, познакомитесь со стилями и научитесь еще более профессионально владеть Midjourney 🔥
Хотите быть в курсе полезных ии сервисов для работы, учебы и облегчения жизни? Подпишитесь на мой канал в Telegram НейроProfit, там я рассказываю о том, как зарабатывать с помощью нейросетей и использовать ии-сервисы для бизнеса 😉
Для всех поклонников футбола Hisense подготовил крутой конкурс в соцсетях. Попытайте удачу, чтобы получить классный мерч и технику от глобального партнера чемпионата.
А если не любите полагаться на случай и сразу отправляетесь за техникой Hisense, не прячьте далеко чек. Загрузите на сайт и получите подписку на Wink на 3 месяца в подарок.
Реклама ООО «Горенье БТ», ИНН: 7704722037
Lumiere создаёт ролики по текстовому запросу, «оживляет» изображения или использует их как референс визуального стиля. При этом итоговое качество поражает.
Lumiere - это модель диффузии текста в видео, которая отлично справляется с синтезом видео с реалистичным, разнообразным и согласованным движением. Эта модель представляет собой значительное достижение в области синтеза видео благодаря использованию архитектуры Space-Time U-Net.
В отличие от традиционных моделей, которые генерируют удаленные ключевые кадры с последующим временным сверхразрешением, Lumiere генерирует всю временную длительность видео за один проход. Такой подход обеспечивает глобальную временную согласованность и позволяет решать различные задачи по созданию контента и редактированию видео.
Преобразование изображений в видео: Преобразование неподвижных изображений в видео на основе заданных подсказок.
Стилизованная генерация: Использование одного опорного изображения для создания видео в заданном стиле.
Стилизация видео: Применение текстовых методов редактирования изображений для последовательного редактирования видео.
Синемаграфы: Анимация содержимого в заданной пользователем области изображения.
Инкрустация видео: Редактирует видео, маскируя и заменяя части видеокадра.
Разработанный командой исследователей и стажеров Google Research, Lumiere демонстрирует самые современные возможности создания видео на основе текста.
Релиз в этом году. Учитывая объёмы информации, доступные Google для обучения ИИ, должно получиться нечто.
Хотите быть в курсе полезных ии сервисов для работы, учебы и облегчения жизни? Подпишитесь на мой канал в Telegram НейроProfit, там я рассказываю о том, как зарабатывать с помощью нейросетей и использовать ии - сервисы для бизнеса 😉