Продолжаю рубрику ̶э̶-̶э̶-̶э̶-̶э̶-̶э̶к̶с̶п̶е̶р̶и̶м̶е̶н̶т̶ы̶ «мучаю нейросеть». StableDiffusion от Automatic1111 не перестаёт удивлять по мере того, как в неё погружаешься. В этот раз я попытался сгенерировать… ну как  попытался, чего прибедняться – сгенерировал Джил. Третья из главных героев, студентка двадцати двух лет.

С Джил всё немного интереснее в плане референсов в реальности. Их нет. Кросс и Мэйтт имеют свои прототипы, на основе которых и базируется их внешность. Для Джил реального образа или человека не существует.
Тем не менее, после нескольких часов генерации я нашёл почти идеальное попадание в мою интерпретацию образа.

Знакомьтесь, Джил Форт:

Самые прозорливые могут обратить внимание, что изображения выглядят несколько неестественно. Слишком гладкая, кукольная кожа (это потому,
что я, дурак, не убрал это из промпта). По сути, в этих изображениях я  доволен двумя вещами – это взгляд и схожесть с образом в моей голове. Но нейросеть творит чудеса преображения. Ща покажу.

На генерации Мэйтта я уже научился расширять изображение, заставляя SD дорисовывать недостающие элементы фона на пустых местах. Сказано – сделано. Вот что получилось:

Всё ещё неестественно, кукольность никуда не делась, даже несмотря на то, что я немного обработал кожу. Да и фон какой-то… ну, никакой. В промпте я попросил нечто вроде бара. В «Сэхсвете» много баров. В барах
происходит много действия. Мэйтт был в баре. Кросс дружит с барменом, и часто зависает в баре. Кульминация первой части происходит в баре.

Как вы поняли, я люблю бары. В них есть какая-то особая атмосфера.
Но тут, повторюсь, фон просто как будто для того, чтобы был. Да, Джил тоже была в баре (и даже не в одном. Видите, как много баров? Обожаю бары)…

Пожалуй. Всё, больше никаких баров.

В общем, мне не хватило какой-то идеи. Что с этим делать, я придумал не сразу, а поэтому решил попробовать воспроизвести сцену из конца книги.
Там Джил… а, нет, это спойлер. Просто покажу результат, без пояснений, что за ужас тут творится. Те, кто уже прочитал, поймут. Хотя, пожалуй, каждый по-своему.

Хочу подсветить одну вещь. Джил – самый важный человек «Сэхсвета».
Самый. Она важнее всего и всех для определённого круга персонажей книги. Поэтому мне хотелось сделать что-то… особенное. Я потратил почти четыре дня на попытки добиться от нейросетки нужного результата. В основном, такое время затрачено из-за неопытности. В каких-то моментах я тыкался наугад, какие-то моменты оказались намного проще, знай я заранее, что делать. И всё равно, именно того, что хотелось, получить не вышло. Поэтому я считаю этот арт неким… концептуальным изображением, творческим переосмыслением, который, тем не менее, отражает суть.

Вот это нечто справа от Джил – вышло совершенно случайно. Я рандомно
генерировал ту область, прокручивая варианты, и на одном из них появилась эта «голограмма». Более того, у «голограммы» было женское лицо. Его пришлось убрать, слишком чётким оно получилось, но вот остальное – просто находка. Кто это – прямо не хочу говорить, но намёков рассыпал достаточно.

т̶е̶г̶и̶:̶ ̶ж̶е̶н̶с̶к̶о̶е̶ ̶л̶и̶ц̶о̶,̶ ̶н̶а̶з̶в̶а̶н̶и̶е̶ ̶к̶н̶и̶г̶и̶

Дальше вот эти молнии на лице. Будто дикая энергия бурлит в Джил, прорывая кожу светящимися трещинами. Это уже не случайность, но добиться этого стоило стольких нервов и усилий… Сначала простым перебором (да и ещё таким, который минимально меняет картинку, чтобы не потерять схожесть образа).
Потом я нашёл в SD замечательный инструмент Sketch. Там можно схематично изобразить, что нужно, и нейросеть дорисует по этой схеме + промпт. Спасибо жене (тот самый голос из соседней комнаты), которая сейчас заулыбалась. Я ж вообще не умею рисовать, а она  художник. Помогла нарисовать молнии. Да и вообще она зайка, так мне помогает, чтоб я без неё делал – ума не приложу.

После добавления молний захотелось больше хаоса. С учётом того, что там происходило… в дело пошёл инструмент Inpaint. Я закрашивал отдельные области, говорил «генерируй изображения только в них» и писал в промптах нечто вроде: «искры, размытие, сияние, гало, аура», комбинируя их так и сяк. По итогу получилось вот это:

Если на первом изображении процесс только начался, то здесь он едва ли не завершается. Энергия бурлит снаружи и внутри, само пространство искажается… кстати, можно заметить, что левая и правая  части заднего фона как будто из разных мест. Так и есть, ̶я̶ ̶н̶е̶й̶р̶о̶х̶у̶д̶о̶ж̶н̶и̶к̶,̶ ̶я̶ ̶т̶а̶к̶ ̶в̶и̶ж̶у̶ это концепт-арт, а не изображение сцены из книги. И по моему скромному мнению, получилось просто фантастически.

Кстати, ваш любимый еженедельный факт – для шлифовки этих артов пришлось пройти ускоренные курсы фотошопа. Дело в том, что в некоторых
изображениях сгенерировались детали, которые хотелось бы видеть в  основном арте (молнии и некоторые искорки). Пришлось вырезать их, перенести. Пришло понимание, что в связке с фотошопом возможности поистине безграничны.

Но это ещё не всё. Вернёмся к̶ ̶б̶а̶р̶у̶ к предыдущему изображению. Мне понравились попытки в концептуальность. Не просто делать портрет персонажа, а вкладывать идею в арт. Пусть даже иногда идея вкладывается
нейросетью посредством случайности. Кто я такой, чтобы спорить?  Положимся на рандом нейросети, хех.

Я начал менять фон с большим параметром (Denoising strength), который позволяет сильно изменять картинку. И в какой-то из многих генераций выскочило вот это:

Честно, я в шоке. В планах этого не было, но рандом сам подкинул идею, вторящую идее книги, точнее – идее Джил, как персонажа. Просто
находка. После совещания с голосом из соседней комнаты, было принято решение сделать это не таким… реальным. Перегенерируем левую часть, превращая её в эфемерность, воображение, метафизику, ̶а̶н̶и̶м̶е̶.̶

В процессе StableDiffusion ещё несколько раз удивил меня рандомом. Дело в том, что нейросетка очень любит женские лица, ̶п̶о̶ч̶т̶и̶ ̶т̶а̶к̶ ̶ж̶е̶,̶ ̶к̶а̶к̶ ̶я̶ ̶–̶ ̶б̶а̶р̶ы̶.̶ И при высоком разрешении и высоком параметре изменения картинки подсовывает эти лица при любом удобном случае, стоит только зазеваться. Пример:

Итак. После нескольких часов получилось вот что:

Тут изображён момент, когда Джил только ушла от Старого Штрамма.
Испуганная, потрёпанная, немного заплаканная. Я очень постарался передать это, детализировав глаза, лицо, синяк. И на данный момент я думаю, что это лучшее, что у меня получилось. В чём идея – по книге, Джил слышит голоса. Не спойлер, прям в аннотации так написано. Арт визуализирует это.

Сверху – подруга Джил, Элиза. Хотя тут у нас с голосом из соседней комнаты возникли разногласия. Она сказала, что Элиза – внизу слева.
Что ж, не могу никому указывать, только напомню, ЧТО Я ТУТ АВТОР, МОЁ СЛОВО – КАНОН!

Извините.

И детали. Тут столько деталей… Даже крошечные шерстинки на свитере видны. Просто шок, как всё можно детализировать. Но особенно лицо Джил, оно вышло просто шикарным.

Дальше техническая инфа для тех, кому интересно:

ponytail hairstyle, 20 years old girl, ortega, chestnut colour hair, blue eyes, 1girl, dark and gloomy full body 8k unity render, wearing black trousers and a grey coat, at cluttered and messy shack, cyberpunk, action shot, porcelain cracked skin, skin pores, detailed intricate iris, very dark lighting, heavy shadows, detailed, detailed face, (vibrant, photo realistic, realistic, dramatic, dark, sharp focus, 8k)

anime, ugly, low quality, bad artistnude, black and white, close up, cartoon, 3d, denim, (disfigured), (deformed), (poorly drawn), (extra limbs), blurry, boring, sketch, lackluster, signature, letters, watermark, low res , horrific , mutated , artifacts , bad art , gross , b&w , poor quality , low quality , cropped

Первые изображения сгенерированы на сборке EasyDiffusion на модели rpg_V4, после доработаны в сборке Automatic1111 на модели Deliberate v2 + капелька фотошопа. Вещь, которую я понял – промпт, конечно, очень важен, если вы хотите сгенерировать красивый арт. Но не менее (а то и более) важно потом обработать изображение, допилить до ума отдельные элементы и детали, что зачастую намного проще, чем добиться этого одним лишь промптом. Кстати, что позитивный, что негативный промпты в моём примере – совершенно избыточны и то, что я сгенерировал – больше результат рандома, чем грамотного ТЗ. В общем, ещё учиться и учиться.

Итог. Я не устану повторять, что я в восторге. Чем глубже я погружаюсь в нейросеть, чем больше изучаю её возможности, тем больше приходит
понимание, что можно делать с её помощью.

Небольшой бонус. Я п̶̶̶р̶̶̶о̶̶̶с̶̶̶т̶̶̶о̶̶̶ ̶̶̶о̶̶̶б̶̶̶о̶̶̶ж̶̶̶а̶̶̶ю̶̶̶ ̶̶̶а̶̶̶н̶̶̶и̶̶̶м̶̶̶е̶̶̶ ̶и̶ ̶з̶а̶ч̶е̶р̶к̶и̶в̶а̶н̶и̶я̶ совершенно
случайно поставил стиль аниме, и получились две вот такие прелестные картинки. Наверное, это не Джил, но вполне себе допускаю, что это может быть её подруга Элиза, так как очень чёткого образа в голове не было. Выкладываю, потому что понравилось, очень миленько.

На этом с главными героями покончено (почти). Дальше – очередь второстепенных персонажей. Если честно, жду этого с нетерпением,  потому что там есть очень колоритные товарищи, и хочется их увидеть.

В прошлом посте был мой котик. Теперь, так как Джил девушка – вот вам кошка. Ну прост)))0)