FLUX Запредельная детализация
Не так давно в сети появилась информация о выходе новой модели Flux и ее нескольких версий. Если говорить кратко, то новые FLUX модели по результатам генерации по идеи должны превзойти текущие модели из-за большого количества параметров обучения, а так же устранить проблемы текущих моделей. Полное описание по FLUX вот тут:
https://www.runcomfy.com/ru/tutorials/a-comprehensive-guide-on-comfyui-flux
https://dtf.ru/craft/2954916-neiroset-flux-vozmozhnosti-i-perspektivy
Однако возникает вопрос: "А действительно ли все так хорошо в генерации?". Ну уровень MJ6 уже давно был достигнут с SDXL и Pony Diffusion моделями, при условии правильных параметров и апскейла (апскейл - улучшение качества фото в нейронных сетях). Flux же может без апсекла выдавать довольно хороший результат на уровне MJ (если промт простой). Однако, все упирается в технические мощности. В среднем на генерацию арта в Automatic 1111 при использовании Pony, SDXL или SD1.5 моделей тратится около минуты без апскейла. У FLUX генерация может занимать от 10 минут (кто говорит, что она работает быстро скорее всего использует сервисы для работы с данной сетью).
Так же стоит понимать, что не каждый сможет установить себе данную модель, ведь технические требования начинаются от 12GB видеопамяти, а это не каждая видеокарта может иметь, если конечно вы не покупали специально такие видеокарты с таким количеством видеопамяти.
Но в текущем посте я не буду описывать все тех. требования данной модели. Нас интересует ее результат. Ради теста я взял две модели FLUX.1 [Schnell] и PD Realism для того, что бы проверить насколько будет различаться результат в генерации изображений.
В качестве промта я буду использовать данную заготовку:
"solo, ((1girl)),(torn clothes),(bob haircut, blue eyes), holding katana, Abstract art, Soft light, cinematic light, Blured background, Rooftop, night, City, Rain, (Side view), Girl sad, tiered face."
Все работы по генерации для FLUX обрабатываются только в ComfyUI
Ниже будут результаты генерации двух моделей.Генерация Pony модели без апскейла:
Pony DF генерация без апскейла
Генерация FLUX модели без апскейла
Так же как пример приложим пару генераций других авторов.
Итак, поработав с FLUX пару дней я могу сказать, что это очень тяжелая модель для работы на локальных станциях, т.к время занимает на генерацию много, работает только в ComfyUI, требовательна к железу, да и результаты не всегда могут получиться теми, которые вы хотите. Конечно все можно поправить используя Control Net + upscale, но вопрос: "Нужно ли оно?". FLUX имеет действительно ряд преимуществ, но за то время, которое FLUX пытается создать фото, можно сходить на 20-минутную тренировку, приготовить поесть или сгенерировать около 30 простых артов, из которых точно один будет отличными и будет апскельнут (но как оказалось это только с базовой моделью). В ходе работы с FLUX я выявил, что есть более легкие модели, основанные на базовой модели, которые приближают время генерации до 2 минут, что уже достаточно быстро для такого качества. Более того, вы может обрабатывать результаты генерации в Automatic 1111 или в другом инструментарии как img to img и тем самым сделать апскейл фото, сняв нагрузку на видеокарту.
Кончено я и не изучил все возможности FLUX, а их там действительно много. Однако, уже сейчас есть дополнительные инструментарии, модели, lora файлы для F1 моделей, так что ждем новые дополнения на civitai и развитие F1 от сообщества.
ai art
новости нейросетей