MultiTalk - пока что лучшая липсинк модель, которую можно сразу в прод. Установка локально и обзор

Аватар автора
AI Генератьон
Multitalk - это новая открытая липсинк модель с высоким качеством синхронизации. Т.е. на лице персонажей вы не увидите артефактов от применения модели, как это может быть заметно в других опенсорсных моделях. Она умеет: - генерировать видео с несколькими говорящими персонажами; - поддерживает видео до 15с качеством 480р или 720р; - поддержка генерации мультяшных героев, пения; - нестандартные стили речи, чтобы это не значило; - работает в ComfyUI. С некоторыми оговорками. В этом видео мы посмотрим на него с позиции локального запуска. Я покажу как это установить, на что обратить внимание, как работает, какие есть настройки, нюансы, какие могут возникнуть ошибки и как их побороть (ну те, с которыми я столкнулся лично), покажу примеры, поговорим о времени генерации и т.д. Обязательно досмотри это видео до конца и смотри внимательно, т.к все что я буду говорить это важно. ________________________________ ✨Ссылки: Полезные видео: Команды установок, как обещал: ● Установка кастомной ноды pip install -r requirements.txt ● Установка segeattention и triton pip install -U triton-windows ________________________________ ✨Таймкоды: 00:00 - Предисловие 02:36 - Что такое Multitalk 05:05 - Установка кастомных нод 08:37 - Качаем воркфлоу 09:50 - Кулстори об установке кастомных нод на личном примере 11:15 - Качаем модели, кладем по папкам 11:45 - Обзор воркфлоу Multitalk и настроек нод 18:52 - Ошибки и как их пофиксить 19:44 - &object is not callable 21:39 - WanVideoSampler...

0/0


0/0

0/0

0/0