Стилизация изображений с ControlNet 1.1 Tile
Мы узнаем как в Stable Diffusion Automatic стилизовать рисованные изображения и фотографии с ControlNet 1.1 Tile. Для примера будем использовать рисованное изображение акварельной краской и свадебную фотографию. Установим расширение Interrogator и подберем с помощью него стиль, основной стилевой токен и художника. Опишем изображение самостоятельно, не будем прибегать к описательным услугам Interrogator. Применим LORA add detail, epiNoiseoffset v2, MermerovDiffusion. Сделаем Upscale изображения двумя методами: с помощью sd upscale, а также с помощью Ultimate SD upscale и Controlnet Tile. Стилизуем свадебную фотографию по похожей методике и восстановим некоторые черты лица в расширении Photopea. Затем сделаем Upscale фотографии в приложении Remini на Windows.
Negative prompt:
(naked:1.3), ((3d, cartoon, anime, sketches)), (worst quality:2), (low quality:2), (normal quality:2), lowres, normal quality, ((monochrome)), ((grayscale)), bad anatomy, out of view, cut off, ugly, deformed, mutated, ((old)), ((fat)),EasyNegative, paintings, sketches, (worst quality:2), (low quality:2), (normal quality:2), lowres, normal quality, ((monochrome)), ((grayscale)), skin spots, acnes, skin blemishes, age spot, glans,extra fingers,fewer fingers, ugly eyes
ControlNet1.1 официальные модели: скачать
LORA MermerovDiffusion: скачать
LORA Add_detail: скачать
LORA epiNoiseoffset_v2: скачать
photopea
upscale
remini
controlnet 1.1 tile
add detail
Daniel Waizman




Sep 28 2023 23:20 (changed)
Daniel Waizman
Уважаемый автор, а где вот эту лору взять EasyNegative? Спасибо.
Sep 28 2023 23:25
OreX
Daniel Waizman, это текстовая инверсия. В моей сборке 1.6 она есть из коробки.
Sep 29 2023 04:51
Daniel WaizmanReplying to OreX
OreX, У меня стоит эта сборка. чтобы ее удалить, и поставить 1,6, мне нужно просто сделать делит папки StableDif и распаковать 1,6?
спасибо,
Sep 29 2023 13:18 

1
Daniel Waizman
А такой результат с чем связан?
Sep 28 2023 23:44
OreX
Daniel Waizman, возможно неправильный vae выбран или модель неправильно работает
Sep 29 2023 04:52 (changed)
Aleksey Kopystynskiy
@OreX подскажите, пожалуйста, как можно усилить контроль над лицами во второй части видео? Все делаю в точности как в видео (модели, нег.промпты, настройки), но лица все время сильно меняются, состариваются, либо если меняю модель на SD 1.5 или другую, лица почти всегда становятся азиатскими. Также пробовал разные препроцессоры в контрол нете с более выраженными масками, но все равно лица очень сильно всегда меняются. Единственное - у меня разница с примером в том, что лица занимают большую часть фотографии.
Oct 21 2023 13:21
OreX
Aleksey Kopystynskiy, при таком приеме лица будут немного меняться. Тут сложно с этим что-то сделать. Можно этот процесс в точности сделать в inpaint и защитить лицо от изменений. И после доработать уже только лицо с низким denoising strength.
Oct 21 2023 13:29 
1
Aleksey KopystynskiyReplying to OreX
OreX, понял, большое спасибо!
Oct 22 2023 04:37
Daniel Waizman
как это исправить?
Dec 16 2023 15:36
OreX
Daniel Waizman, выбираете модель на базе 1.5 и нажмите Refresh на вкладке embedding
Dec 16 2023 20:08