Последние несколько лет, с момента входа в обиход легкодоступных нейросетей для обработки изображений, меня преследует одно и то же навязчивое желание, которое я безуспешно пытаюсь реализовать раз в несколько месяцев.
А именно - сделать максимально допустимый "HD ремейк" мультсериала Хроники Звездного десанта (или же Roughnecks: Starship Troopers Chronicles в оригинале), выходящего на экраны нашего телевизора в ранних двухтысячных по нашему телевидению. Не думаю, что многим это название знакомо, но может быть интро разблокирует кому-нибудь воспоминания.
Бесполезный факт: Заглавная тема интро является ремиксом части Сонаты №8 Бетховена.
Так вот, возвращаясь к теме. Раз в несколько месяцев я использую различные нейроинструменты в попытках сделать хоть что-то вразумительное для улучшения качества исходной записи. Самым первым, что я пробовал, было разделение видео на исходные кадры, увеличение каждого отдельного кадра и соединение их обратно вместе. К сожалению, результат подобного подхода был так себе. Будучи ограничен технологиями своего времени я обладаю весьма слабым компьютером, так что приходилось использовать онлайн сервисы.
И так из раза в раз, из квартала в квартал, создавал короткий семпл и разочарованно прекращал неудовлетворенный итоговым допустимым результатом. Не знаю, почему именно этот сериал вызвал у меня такое чувство. Хотя знаю - видеокассета с первым сезоном позволяла мне отвлекаться от творимого в детстве пиздеца. Те прекрасные дни, когда пьяный отец приводил домой трахать проституток, а мать рыдала в соседней комнате, за что он её бил чтобы не шумела. В общем, этот мультсериал был моим другом в детстве. Да, так себе друг, но чем богаты.
И тааак. Спустя несколько лет итераций вот семпл максимального результата, которого я могу добиться.
Голоса озвучки - elevenlabs - на каждую реплику ушло примерно по 10 попыток.
Удаление оригинальных голосов с видео - CupCat
Повышение разрешения и частоты кадров - Topaz Video.
Результат выглядит так себе и я прекрасно вижу свои ошибки. Правда для этого пришлось сначала отрендерить это в течение тройки часов, компьютер не вывозит. Повышение разрешения и частоты кадров сильно ударило по картинке. А сами голоса не соблюдают оригинальную интонацию и приходилось повторно генерировать, в надежде что "вот тут он скажет не ~убивать жУков~, а ~убивать жукОв~". У elevenlabs, несмотря на общее превосходящее всех известных мне конкурентов качество генерации голоса, отсутствует такая элементарная возможность, как указание ключевых слов для акцентирования или хотя бы указание ударения в словах.
Плюс огромной пропастью является исходное качество оригинальных записей. Выше 480p найти что-то невозможно, а часть записей в качестве даже ниже. Официальные DVD боксы заказать из-за рубежа в данный момент нет никакой возможности, но и там качество не сильно лучше. Многочисленные артефакты записи не добавляют баллов для дальнейшего улучения.
Знаю что тут, на Пикабу, раньше точно были реставраторы видеоконтента. Подобные сериалы, в связи со своей малоизвестностью, вряд ли представляют для них какую-то ценность. Но может вдруг найдутся те, у кого имеются записи конкретно этого мультсериала в хорошем состоянии? Или может быть вдруг официальный диск - я готов его купить. Или кто подскажет, какой движок ТТС лучше использовать, в котором можно было бы настраивать и голоса и интонации? В общем, о чем я тут вообще...
Я был бы рад любому совету о том, как поддержать своего старого друга. Пусть многим это и покажется глупостью.
