Концепция и референсы
Если вы в детстве были частым посетителем летних лагерей или бывали на ночевках с друзьями, то рано или поздно сталкивались со страшилками про пиковую даму или черный- черный город. Это жутковатые, чутка наивные истории, которые дети рассказывали друг другу у костра или в темной комнате, накрывшись одеялом и включив фонарик.
В Японии в эпоху Эдо была популярна похожая игра — Хякумоногатари Кайданкай. Участники садились в кругу в комнате, где было зажжено 100 свечей. По очереди рассказывая истории о привидениях и сверхъестественном, они гасили по одной лампе, и с каждой историей в комнате становилось все темнее и темнее.
Отличие в том, что эта игра не оставила равнодушными знаменитых граверов того времени и появился отдельный жанр — Юрей-дзу, в котором в том числе работали такие мастера, как Кацусика Хокусай, Цукиока Ёситоси и Такехара Сюнсен. Их работы и были включены в датасет для обучения модели.
Пизрак Ойвы
Особняк Тарелок
Кацусика Хокусай, XIX век
Жадная старуха и сундук с чудовищами
Минамото-но Райко Ёримицу и цути-гумо
Цукиока Ёситоси, XIX век
Кадзэ-но-ками
Сюссебора
Такехара Сюнсен, XIX век
Идея проекта — трансформировать русские страшилки в японские гравюры, выполненные в жанре Юрей-дзу.
Сгенерированные гравюры
В черном-черном городе
Однажды в черном-черном городе, черной-черной ночью, на черном-черном кладбище открылась черная-черная могила. Из нее вышел черный-черный покойник и пошел в черный-черный дом на черной-черной улице черного-черного города. Зашел в черный-черный подъезд, открыл черную дверь и вошел в комнату, в которой спала маленькая девочка. Он подошел к ней и сказал: «Отдай мое сердце!»
prompt: an engraving in JAPAN style, In a dark room, a skeleton holds a black heart in his hand and stands over a beautiful alive young girl sleeping peacefully in her bed.
- Для генерации первой картинки был использован промт: «an engraving in JAPAN style, dark street in the dark big city, at dark nigh», влияние Lora уменьшено (scale = 0.8), что позволило сделать улицу более приближенной к реальным японским улочкам
- вторая картинка сгенерирована с полным весом обученной модели
Девочка с тремя глазами
В 1978 году в одной семье родилась девочка, без рук и ног, но с тремя глазами. Через три года после ее рождения умерла ее мама, потом папа, потом дедушка. каждый раз у покойника не хватало то руки, то ноги, а у девочки они, наоборот, появлялись. Бабушке показалось это странным. И как-то вечером приходит девочка к бабушке в комнату и говорит: «Бабушка, дай мне вторую руку!», и отгрызает старушке руку.
prompt: an engraving in JAPAN style, a girl with three eyes, detailed face
prompt: an engraving in JAPAN style, a girl with three identical eyes: two in normal position and a third matching eye in the center of her forehead, detailed face, symmetrical
Было тяжело заставить модель нарисовать третий глаз хотя бы приблизительно похожим на два остальных, поэтому тут я экспериментировала с шагами обучения модели и разными формулировками промпта
(генерации изображений обученной моделью на 250, 500 и 1000 шагах в порядке расположения картинок соответственно)
Пианино с красным пятном
В одной семье девочка очень просила маму купить ей пианино. Просила-просила, и мать, наконец, решила сделать дочери подарок. Купила на распродаже пианино, на котором было красное пятно. Днем все ушли, и девочки села играть. Вдруг из пятна вылезли руки и задушили девочку. На другой день стал брат играть. И снова вылезли руки и задушили мальчика. На следующий день отец решил разобрать пианино. Разобрал, а там чьи-то руки лежат. Отец их изломал и выкинул и пошел в магазин сдавать пианино. Пришел, а там старуха-продавщица, без рук.
prompt: an engraving in JAPAN style, severed hands with pale skin and long fingers crawling out from under the lid of an antique piano, close-up, horror, dramatic shadows, supernatural, eerie atmosphere
prompt: an engraving in JAPAN stya, girl sitting at a piano, focus on the piano lid slightly open, pale skeletal hands with long fingers crawling out from under the lid, reaching toward the keys, horror
Тот же подход пришлось применить и к этому сюжету, так как плохо получалось изобразить руки
Гроб на колесах
Жила-была девочка. Однажды она осталась дома одна. И вдруг по радио передают: «Девочка, девочка, Гроб на колесиках выехал с кладбища, твою улицу ищет. Прячься». Девочка испугалась, не знает, что делать. Мечется по квартире, хочет маме по телефону позвонить. А в телефон говорят: «Девочка, девочка, Гроб на Колесиках нашел твою улицу, он твой дом ищет». Девочка пугается, запирает все двери, зашторивает окна, но из дома не убегает. Сидит и трясется от страха. Радио снова передает: «Девочка, девочка, Гроб на колесиках нашел твой дом и едет в квартиру»… Когда родители девочки вернулись с работы домой, они нашли девочку мертвой.
prompt: an engraving in JAPAN style, a wooden coffin on wheels rolling into a room, horror, dramatic shadows, the supernatural
an engraving in JAPAN style, a frightened little girl alone in a dark room, hiding under a blanket, shadow of a coffin with wheels creeping through the window, horror, dramatic shadows, fear
Пятно на стене
Одна семья переехала в новую квартиру. Все было хорошо, только на обоях было странное красное пятно. Вот легли все спать. Вдруг из пятна вылезла рука и задушила отца. На следующую ночь красная рука задушила мать. Дети очень испугались. Они решили не ложиться ночью спать. Как только стемнело, рука показалась из пятна. Она была красная и светилась. Она полетала по комнатам, не нашла детей и вернулась в пятно. Утром дети позвали милиционера. Он пришел и выстрелил в пятно из пистолета. Оно тут же исчезло. Но когда милиционер пришел домой, на стене он увидел красное пятно…
prompt: a engraving in JAPAN style, a red hand emerging from a dark spot on the wall, horror, dramatic shadows
Черный Телевизор
У одной девочки мама купила телевизор, но он оказался черный, потому что других телевизоров в магазине не было. Мама этой девочки строго-настрого запретила включать ей телевизор, но девочка не послушалась и включила. На следующий день мама умерла. После похорон девочка пришла домой и снова включила телевизор, но он ничего не показывал. На следующую ночь девочке во сне приснилась мама, которая сказала: «Это ты меня погубила Черным Телевизором, никогда его не включай». Но на следующий день девочка снова включила телевизор, тогда из экрана высунулись длинные черные руки и стали душить девочку и задушили. Наутро соседи нашли в квартире труп девочки, а телевизора не было.
prompt: an engraving in JAPAN style, a black television set in a dark room, ghost is sitting there, ghostly, horror
prompt: an engraving in JAPAN style, a black television set in a dark room, only two arms emerging from the screen, ghostly, horror
И просто всем известный образ крипового клоуна
prompt: an engraving in JAPAN style, a picture of a creepy clown
Вывод
Модели в целом удалось передать стиль японской гравюры, и если черты работ каждого отдельного автора тяжело выделить, то присущая всем работам штриховка, лайн, работа с фоном стабильно прослеживаются в сгенерированных работах. Такие вспомогательные элементы, как японский текст (пускай и не имеющий смысла) и рамка, также работают на узнаваемость стиля.
Проект был создан с использованием нейросетей
- Генеративная модель Stable Diffusion XL с BLIP и LoRA, обученная на датасете с гравюрами трех японских мастеров с целью создать модель, генерирующую изображения в жанре Юрэй-дзу в их стиле
- ImageOutpainting — расширение исходных гравюр к соотношению 1:1
- DeepSeek (https://www.deepseek.com/) корректировка промптов, помощь в отладке кода
Тексты страшилок взяты с сайта Parents (https://www.parents.ru/article/letayushaya-ruka-pianino-s-krasnym-pyatnom-i-zelenye-shtory-15-sovetskikh-strashilok/)