Stable Video Diffusion | Генерируем видео на ПК и в Сети
Stable Video Diffusion - это новая технология для генерации видео. Видео можно генерировать из фотографии, то есть мы можем оживлять наши генерации. На данный момент SVD работает на ComfyUi, но скоро выйдет и расширение под Automatic 1111.
В этом видео вы узнаете как генерировать видео на вашем ПК. И если у вас слабая видеокарта, то вы можете воспользоваться бесплатным сетевым сервисом.
В этом видео вы узнаете как генерировать видео на вашем ПК. И если у вас слабая видеокарта, то вы можете воспользоваться бесплатным сетевым сервисом.
Меню:
00:00 - Вступление
01:39 - Установка Stable Video Diffusion на ComfyUI
05:49 - Обзор рабочего процесса SVD на ComfyUI
11:39 - Интернет сервис для генерации видео Decoherence
16:16 - Эпилог
Ссылки
Интернет сервис для генерации видео Decoherence: ссылка
Модели: ссылка
ComfyUI: ссылка
ComfyUI Manager: ссылка
🟢 Файл рабочего процесса:
OreX-SVD-1.json18.33 KbDownload
comfyui
svd
stable video
stable video diffusion
decoherence
Не увидел/услышал в начале требований к железу
И кстати, видюхе хватает оперативы, а вот оперативы общей до 35 гигов кушалось из 64
И сразу же вопрос - а можно (и как) источником изначальной генерации сделать фокус?
А вот что бы избавиться от дополнительного шага, то есть открытия фокуса, генерации в нем, затем закрытия (потому что если фокус открыт, генерация видео в разы медленней). Да и вообще продуктивней всего сюда пришпандоривать фокус, а не стейбл, ибо он очень стабильные и хорошие результаты выдает по самому тупому промту, в отличии от стейбл, которому нужно километровый промт писать, что б получить красивую картинку.
ImageOnlyCheckpointLoader:
- Value not in list: ckpt_name: 'SVD--\svd_xt.safetensors' not in (list of length 107)
CheckpointLoaderSimple:
- Value not in list: ckpt_name: 'juggernautXL_version6Rundiffusion.safetensors' not in (list of length 107)
(IMPORT FAILED) ComfyUI-VideoHelperSuite. Гугл не помог =(
ERROR:root:* RIFE VFI 58:
ERROR:root: - Value not in list: ckpt_name: 'sudo_rife4_269.662_testV1_scale1.pth' not in ['rife40.pth', 'rife41.pth', 'rife42.pth', 'rife43.pth', 'rife44.pth', 'rife45.pth', 'rife46.pth', 'rife47.pth', 'rife48.pth', 'rife49.pth']
ERROR:root:Output will be ignored
ERROR:root:Failed to validate prompt for output 51:
ERROR:root:* CheckpointLoaderSimple 46:
ERROR:root: - Value not in list: ckpt_name: 'juggernautXL_version6Rundiffusion.safetensors' not in (list of length 30)
ERROR:root:Output will be ignored
И такая ошибка выскакивает не только на ваш файл. Вот тут https://comfyanonymous.github.io/ComfyUI_examples/video/ образцы для генерации видео. Первый образец, где из картинки видео, он работает. А второй, где из текста в картинку, а потом в видео -- та же ошибка. Подскажите, пожалуйста. Что я делаю не так?