модель доступна на civitai.com

Датасет включает 6983 изображения!

Самое сложное — создание датасета. На это ушло больше полутора лет. Работал эпизодически, но иногда плотно — по несколько недель и до 8 часов в день.

В моём Telegram-канале — подробности обучения, примеры генераций в процессе обучения и тестов!

В модели нет типичных мрачных штампов - вроде облезлых зданий, панельных домов, хрущевок и бараков и прочих ебеней.

Но для любителей постапокалипсиса добавили немного контента - на основе художественных произведений и различных артов.

Например в датасет вошло немного артов на тему: Метро 2033, Сталкер, Футуристичного постапокалипсиса.  Но из-за небольшого набора данных-обучилось на них неуверенно и генерит эти тематики не лучшим образом.

Цель: генерировать не западное ретро с парой советских элементов (как сейчас у большинства нейросетей), а более полную картину:

типы людей (прически, одежда),

окружение (автомобили, интерьеры, архитектура),

детали быта и другие аутентичные элементы.

Нереально создать набор данных, который охватывал бы все разнообразие марок автомобилей, предметов быта и т. д.

*Если вы интересуетесь советской тематикой и у вас есть отсортированная подборка фотографий, например, по конкретным моделям советских автомобилей - вы можете поделиться со мной для будущего обучения. Требования к таким подборкам можно найти в моем блоге.

Если читали описание канала — знаете главную цель: найти единомышленников с готовыми тематическими подборками фото. На их основе смогу расширять датасет по советской тематике.

Пока только один человек прислал архив фото тепловоза 2TE116 — вот несколько генераций на этой модели.

Soviet era, diesel locomotive 2TE116, is running, green paint with red and yellow stripes, black smoke billowing from the chimney, railway tracks, overhead electrical wires, leafless trees in the background, clear blue sky, daytime.

Soviet era, diesel locomotive 2TE116, green with orange stripes, parked on railway tracks in an industrial area, surrounded by overhead electrical wires, large factory buildings in the background, blue sky with some clouds

Например в модели есть много кадров из советских фильмов: "Странные взрослые"-1974 года и "Внимание, черепаха!"-1970 года.

Главная проблема что фильмы оцифрованы с кинопленки в итоге есть много артефактов царапины пыль и на соседних кадрах может гулять резкость и все изображения без мелких деталей и довольно мыльные.

Делать датасет на основе таких кадров сложно -сначала требуетcя ретушь нужных кадров и их доработка. Потом на этих мыльных кадрах обучается LoRA лучше на Flux. Потом на этой LoRa делается много генераций и даже можно прогнать через нее изначальные картинки. Потом эти генерации добавляются для нормального обучения. В итоге похожесть персонажей несколько ухудшается но возрастает качество. Но главное сохраняется нужная атмосферность - например в фильме

"Внимание, черепаха!" - отличный свет и цвет, операторская работа и много хороших портретных крупных планов.

Также в тренировку был включен небольшой набор данных FLUX LoRA Soviet_Era_AHS

, предоставленный его автором.

Мне пришлось сделать новые описания этих изображений в SDXL - но оригинальный тег «Soviet_Era_AHS» сохранился.

Обучение проходило на простом объединении двух моделей:

и

Оптимальные параметры для использования модели не определены. Они примерно одинаковы для большинства популярных моделей SDXL.

Я использую:

Steps: 60, Sampler: DPM++ 2M SDE, Schedule type: Karras, CFG scale: 5,

Предпочтительно использовать - Hires fix, мои параметры:

Denoising strength: 0.35, Hires Module 1: Use same choices, Hires CFG Scale: 5, Hires upscale: 1.4, Hires upscaler: 4x_NMKD-Siax_200k

Теги задействованные в модели:

Soviet era, Soviet futurism, 1950s, 1960s, 1970s, 1980s, pervoklassnik school uniform, oktyabrenok school uniform, pioner school uniform, Leningrad, car ZIM, car GAZ-M20, car GAZ-21, car Moskvich-402, car Moskvich-408, diesel locomotive 2TE116, pedal car, pedal horse, trolley bus, bus PAZ-672, Cheburashka, cover of ОГОНЁК magazine, budenovka, post apocalypse, kommunalka, studio photo, Mauser-C96 pistol, pervoklassnik, oktyabrenok, pioner.

Это далеко не полный список - постепенно буду в этом блоге публиковать с примерами картинок.

Построение запросов для данной модели. В начале указываются основные теги, затем идет описание на простом языке, а в самом конце могут быть добавлены дополнительные теги.

Пример нескольких запросов:

Soviet era, winter utopiSoviet era, with heated glass walkways connecting pyramidal buildings, citizens in quilted silver coats and fur hats walking past ice sculptures of Soviet heroes, stark white-and-blue palette.

Soviet era, group of young boys and young girls wearing white shirts and red ties stand behind Brezhnev Leonid il'ich in suit, pioner school uniform, 1970s

Soviet era, oktyabrenok school uniform, photo of young girl in dress and shoes, 1970s, girl 10yo

Soviet era, studio photo, 1980s, girl 4yo, studio photo of a little girl sitting on a cube, the girl holds a large Cheburashka on her lap and looks fearfully at the camera.

Soviet era, car ZIM, oktyabrenok, oktyabrenok girl school uniform, girl 8yo, close-up portrait of a young girl in school uniform standing next to car ZIM parked on a street, 1960s

Есть еще теги, которые я использовал в тренинге - полный список и более подробные инструкции, а также дополнительные изображения я буду постепенно публиковать в этом блоге.

Предварительные тесты показали что на этой модели в Fooocus по рефересным картинкам вполне можно делать новые дизайны и тд.

Вот например футуристичный ПАЗ.