У HeyGen опять обновление - модель Аватар 4! Можно загрузить одно фото и оживить его) Можно пойти дальше и подгрузить даже через api свой клон голоса в ElevenLabs - и вообще можно отдыхать)

Модель сразу доступна на главной странице, на всякий обвела на своем скрине, чтоб вы не запутались в их обновках:

По поводу потестить:

Сейчас видимо шквал желающих, потому как я загрузила фото и все резво пошло, но потом ждала почти час. Сам текст можно написать до 140 символов, но не факт, что они войдут в 10-секундный хронометраж, поэтому текст возможно придется подсократить. Беслпатно 3 генерации.

С дальними планами, как мне показалось, хуже работает:

Сразу скажу, что я использовала Text2audio со встроенными голосами для теста, но если загрузить свой голос или клон с ElevenLabs, то будет шикарный результат.

Почему HeyGen лучше Synthesia

Если раньше Synthesia им еще в затылок дышала, то в этом посте я рассказала, почему Synthesia проигрывает со своими эмоциональными аватарами.

Сравнение Avatar IV с Avatar III от HeyGen

Кстати, можете сравнить Аватар 4 от HeyGen и их прошлую модель Аватар 3, вот тут в посте показывала. Так что сомнений нет, Аватар у них крутые получаются. Да, и кстати, мне их оживлятор изображений Expressive photo avatar с подогнанным липсинком всегда больше нравился всяких Hedra и иже с ними - вот тут мои эксперименты и сравнения с Hedra. Да и дубляж с переводом и липсинк у них крутой, это когда видео переводится на другой язык с подогнанными в текст губами и адаптированным голосом (вот здесь сравнивала с Elevenlabs).

В общем, ребята молодцы, везде успели!

Минусы я пока вижу только в длительности:

• сам ролик всего лишь 10 секунд получится, как и в случае с Expressive photo avatar - там доступно только 30 секунд, зато какой шикарный липсинк 😍

• Долго ждать результат, так как дают пощупать бесплатно.

Так что, продукты классные, но нам бы хотелось побольше и побыстрее 🥲 А вы тестите, может у вас дело по-другому пойдет, и сразу все без ожидания получится, так что попробуйте 😉

HeyGen пока лучший сервис для создания цифровых двойников, если раньше Synthesia могла посоревноваться, выкатив эмоциональные аватары. То после того, как HeyGen тоже выпустил эмоциональные аватары с улучшенным пониманием контекста да еще и добил аватарами в движении - сомнений не осталось.

Сейчас HeyGen еще больше закрепили свои позиции, выпустив еще одно мощное обновление, способное еще больше размыть разницу между реальным человеком и его цифровым клоном.

Что нового в HeyGen

Видео переведено в Elevenlabs (у кого не работает, причина кроется в трех буквах 🤫)

Помимо того, что новые модели аватаров стали гораздо реалистичнее, появилась возможность менять как образ самих цифровых двойников, так и ракурсы камеры:

• Теперь цифровому аватару можно менять позы и одежду

• Можно менять угол съемки

• При dubbing (перевод видео на другой язык) учитывается разница в хронометраже

Как попробовать HeyGen:

• На сайте HeyGen выбираете Avatars, нажимаете Create Avatar и далее следуете инструкции

• После того, как вы записали ролик, согласно инструкциям, нажимаете Create Video — Avatar Video

• Теперь нужно выбрать ориентацию видео и свой аватар

• Затем необходимо добавить сценарий для видео и нажать Submit, ролик скоро будет готов

  Вообще здорово, если раньше такого цифрового аватара легко можно было распознать по неестественной мимике, одинаковой локации и одежде и роботизированным движениям, то сейчас задачка посложнее - можно переодевать аватары, менять фоны, локации, позы и углы камеры. Видео к этому посту говорят сами за себя - с первого раза сложно угадать, человек это или нет - липсинк качественно  подстроен, эмоции и жестикуляция подходит под контекст.