Серия «Полезные и интересные нейросети»

С историей диалога, и возможностью общения через Siri.

Для начала качаем нашего чат бота с iCloud: https://www.icloud.com/shortcuts/d0f4de78d4bb44fdbdb3208dce3...

Бот сделан через приложение Команды и использует наш API сервер проекта NeuroGPT. GitHub проекта: https://github.com/Em1tSan/NeuroGPT

После загрузки нажимаете Настроить, а затем Добавить. Теперь в списке команд у нас появился Нейробот. Для удобства можете добавить его как виджет на рабочий стол.

Для того чтобы начать чат, просто нажмите на виджет и введите свой текст, к примеру мы попросим рассказать его про Нептун.

Если текст отображен не полностью то просто нажмите на сообщение и оно откроется целиком.

Кнопка Отмена закрывает чат, кнопка Готово перейдет к след запросу.

Для активации Siri необходимо сказать "Siri, Нейробот" и она запустит команду.

Будущие обновления будут выходить в моем Telegram канале: https://t.me/neurogen_news

Также можно найти другую информацию по различным нейросетям.

Ну а если у вас возникнут трудности, спросить помощи можно в нашем чате: https://t.me/neurogen_chat

FaceFusion - это продукт одного из разработчиков популярного дипфейка Roop. Дело в том, что у них произошел разлад, проект Roop закрался, а команда разошлась.

В целом, FaceFusion - это тот же самый Roop, только с интерфейсом на базе Gradio, который многие знают по Stable Diffusion от Automatic1111

Тем не менее множество функций тут вынесены из командной строки в интерфейс.

FRAME PROCESSORS - этот модуль отвечает за обработку кадров.
face_swapper - просто замена лица
face_enhancer - улучшение лица (через GFPGAN)
frame_enhancer - новая опция, апскейлит весь кадр.

EXECUTION PROVIDERS - тут вы выбираете ваш бэкенд, через что будет идти обработка. На видеокартах Nvidia это Cuda либо TensoRT, на AMD это DirectML (DML), если запускать на Windows.

Остальные же параметры в блоке EXECUTION отвечают за скорость обработки. Больше потоков - больше скорость, больше потребление видеопамяти. Поэтому выставляйте в меру, большое количество потоков может привести к вылету либо к замедлению работы.

MAX MEMORY - лимит потребления оперативной памяти.

OUTPUT VIDEO ENCODER - через какой енкодер будут собраны кадры в видео, после замены лица. Для видеокарт Nvidia можно использовать NVENC, так как он базируется на аппаратном ускорении.


KEEP FPS, KEEP TEMP, SKIP AUDIO - Отвечают за то, чтобы Сохранить фпс оригинального видео, оставить временную папку с раскадровками и пропустить аудио.

Средний блок отвечает за выбор файлов с которыми мы будем работать.

SOURCE - фото с лицом, на которое будем менять

TARGET - фото или видео, в котором будем менять лицо

OUTPUT PATH - где будет сохранено видео. Также в Output появится итоговое видео

Третий блок содержит в себе:

PREVIEW - Тут вы можете посмотреть как будет выглядеть замена.
FACE RECOGNITION - выбор распознавания лиц. Либо на основе референса, либо все лица.

REFERENCE FACE - тут как раз и будут лица, распознанные на кадре из превью. Выбирая их, вы выбираете какое лицо будет меняться в кадре.

Оставшиеся параметры отвечают за настройки анализа лиц.

Что касается скорости работы - я не заметил разницы с последней версией Roop. Все примерно точно так же, шустро, но можно и шустрее (Refacer и Rope тому примеры)

Как обычно, я сделал портативную версию с запуском в 1 клик. Пока что готова версия для Nvidia, версия для AMD будет позже, ссылку на нее оставлю у себя в Телеграм канале.

Скачать портативную версию можно по ссылкам:

Мое облако | Яндекс Диск

Особенности портативной сборки:
- Запуск в 1 клик, не надо ничего устанавливать
- Удалена 18+ цензура.
- Обновлены библиотеки CUDA (Cudnn 8.9.4)

После открытия программы, откройте в браузере адрес, который будет написан в консоли (обычно http://127.0.0.1:7860)

Последующие обновления, а так же другие дипфейки можно найти у меня в Телеграм канале, а пообщаться на тематику всего, что связано с нейронками - можно в нашем чате.

Многие просили меня сделать собственную версию портативной версии Stable Diffusion, и вот наконец-то у меня дошли руки.

За основу взят форк stable-diffusion-webui под названием SD.Next (он же automatic от vladmandic). У меня был его обзор на YouTube канале, сейчас он конечно сильно изменился, но функции из видео все еще остались на месте.

В чем отличие от automatic1111:

• SD.Next отличается глубокой оптимизацией и улучшенной производительностью, а также расширенным функционалом.

• Больший диапазон настроек.

• Предустановлен и интегрирован в систему ряд расширений: ControlNet, Tiled VAE, Image Browser и другие.

• Возможность переключиться на diffusers, что расширяет поддержку моделей, добавляя поддержку Kandinsky 2.1 и других.

• Работа на GPU Nvidia, AMD, Intel и в том числе на процессорах из коробки.

Особенности портативной версии:

- Не требует установки Python, GIT, Cuda toolkit и т.д. Скачали, распаковали, пользуетесь.

- Предустановлен VAE и универсальная модель dreamshaper v8

- Предустановлены кастомные ESRGAN апскейлеры

- Предустановлено расширение roop (замена лица на изображениях)

- Предустановлено расширение swap-mukham (замена лица на изображениях, видео)

- Обновляется автоматически при каждом запуске

Поддерживаются видеокарты Nvidia и AMD и Intel ARC

Скачать портативную версию можно по этой ссылке

Для запуска необходимо распаковать архив через WinRAR или 7zip и запустить файл universal_start.bat


Будущие обновления сборки, а также другие полезные нейросети с простым запуском можно найти в моем телеграм канале Neurogen