О VAE коротко
Variational Autoencoder
Вкратце: чтобы усилить выходные данные и убрать артефакты той или иной модели под что заточена эта VAE ( люди, аниме, задники...)
Чуть развернуто:
Генеративные модели используют для того, чтобы производить случайные выходные данные, которые выглядят схоже с тренировочным набором данных, и тоже самое вы можете делать с помощью VAEs. Однако, зачастую необходимо изменить или исследовать вариации на данных, которые уже имеются, и не случайным образом, а определённым желаемым способом. В этом случае VAEs работают лучше, чем любой другой ныне доступный метод
Если вы используете стандартную модель от SD, то при процессе раскодировки SD использует дефолтный VAE, который входит в сборку автоматика или другие сборки, которые вы используете. Если же вы скачали какую-то другую модель, то тут начинаются нюансы.
Стандартную VAE можно использовать, но больше подойдет для пейзажей, архитектуры и паинтов. Авторы новых моделей, которые можно найти на сайтах каталогах, иногда, добавляют VAE заточенные под их модели. Они тренируют модель VAE под себя, под свою модель, тем самым улучшают те детали, на которые была заточена модель, это может быть космический сет, аниме, аналоговое фото и т.д. Например, есть VAE заточенные под аниме, они натренированы под стиль аниме. С таким VAE отлично получается генерация анимешных артов, но с помощью аниме VAE вы уже не разожмете, например, реалистичное фото человека или животного.
___
Ссылки на некоторыеVAE:
https://huggingface.co/stabilityai/sd-vae-ft-mse-original/resolve/main/vae-ft-mse-840000-ema-pruned.safetensors
(Sd1.5) классическая
https://huggingface.co/andite/anything-v4.0/resolve/main/anything-v4.0.vae.pt
(Anime)
https://huggingface.co/stabilityai/sd-vae-ft-mse-original/resolve/main/vae-ft-mse-840000-ema-pruned.safetensors
(Sd1.5) классическая
https://huggingface.co/andite/anything-v4.0/resolve/main/anything-v4.0.vae.pt
(Anime)
Отобрал самые 100% безопасные. Остальные на свой страх и риск. Говорят Orangemix и Anything хорошие, но там стоит предупреждение о pickle. Не решусь рекомендовать лично🙃
____
Куда:
...models/ VAE
...models/ VAE
Как включить:
Settings/user interface/
Найти Quicksettings list и вписать туда :sd_vae
Settings/user interface/
Найти Quicksettings list и вписать туда :sd_vae
Потом apply и reload UI
Должен появиться сверху у выпадающего меню чекпоинтов(моделей)
Максим Шаговиков
Quick UI? Не вижу
Apr 21 2023 11:11
Олег Юрков (Oritey)
Максим Шаговиков, fixed, pls check)
Apr 21 2023 12:53 

1
Максим ШаговиковReplying to Олег Юрков (Oritey)
Олег Юрков (Oritey), ага спасибо)
Apr 21 2023 13:07