Обучение модели в стиле Сидни Холл

Сидни Холл (1788? -1831) — британский мастер гравюры и картограф, хорошо известный и популярный благодаря своим атласам начала девятнадцатого века, содержащим карты Соединенного Королевства и древнего мира, воспроизведенные по гравюрам Холла. Холл сделал гравюры для ряда международных атласов в то время, когда картография и атласы были очень популярны. Он также выгравировал серию карточек с изображениями различных созвездий, изданную около 1825 года в виде коробочного набора под названием «Зеркало Урании». Целью проекта является обучение модели нейросети Stable Diffusion XL LoRA на работах его серии астрономических гравюр.

Ниже представлена часть массива из 26 работ, которые использовались в обучении

Модель была обучена за 800 шагов, каждое изображение генерировалось в 25 шагов. В результате модель выдает четкие картинки высокого качества и очень хорошо справляется с оригинальными цветами С узорами SDXL справляется плохо и может только повторить общее впечатление от высокой иллюстративности, но не прорисовать внятную сеть линий. С генерацией текста модель не справлялась, но у нее и не стояло такой задачи. Часто присутствуют артефакты в виде лишних конечностей, а самым чистым получилось изображение тукана.

Модель обучена на базе stable-diffusion-xl-base-1.0

https://huggingface.co/stabilityai/stable-diffusion-xl-base-1.0