Идея проекта
Цель проекта — обучить модель Stable Diffusion XL создавать изображения в стиле Ханса Руди Гигера с помощью DreamBooth и LoRA.
Ханс Гигер был выбран не просто так. Я захотел создать что-то милое в общественном понимании, но в стиле фантастического реализма работ Ханса Гигера.
Сможет ли модель перенять не только внешние признаки живописи, но и сам визуальный язык художника? Прежде всего — детализацию его работ, сложные формы и жутковатую атмосферу.
Ханс Гигер отлично подходит для такой проверки: его стиль узнаваем и при этом наполнен множеством деталей, что сложно для генерации.
Нужно передать и рельефность в его работах, фактурность и главное, жуткую эстетику с налётом бодихоррора.
Для обучения был собран датасет из 39 изображений работ Ханса Гигера. Он содержит Страшные изображения людей с множеством проводов и механизмов.
Такой датасет разных жанрах. Это важно, потому что задача состояла не в повторении одной канртины, а в переносе общего художественного языка на различные картинки.
база данных с картинами Гигера
Для обучения использовалась связка Stable Diffusion XL, DreamBooth и LoRA. Такой подход позволил адаптировать модель под стиль Яна ван Эйка на небольшом датасете.
LoRA здесь была особенно уместна, потому что она дообучает только часть параметров модели. Это снижает нагрузку на память, ускоряет обучение и помогает избежать слишком жёсткого переобучения на маленьком наборе изображений.
После обучения была сгенерирована серия из 10 изображений.
a pikachu creature in the biomechanical style of h.r.giger, organic metal fusion, dark surrealism, intricate details, biomechanical exoskeleton, glowing yellow eyes, posed menacingly, eerie atmosphere
bambie on stile of geger
cucaricki in giger style
create a pikachu in GIGER style
a pikachu creature in the biomechanical style of h.r.giger, organic metal fusion, dark surrealism, intricate details, biomechanical exoskeleton, glowing yellow eyes, posed menacingly, eerie atmosphere
Angel and Eva in gigger style
gummy bears in gigger style
anime 'Evangelion' in GIGER style, battle of robot and angel
Snow White anmd gnomes in giger style
New York itime square in gigger style
