что мы будем делать мы не будем обучать большую нейросеть с нуля. Мы будем обучаем LoRA — маленькую надстройку поверх SDXL, которая запоминает визуальный язык датасета
кратко перед работой: вам нужно: — собрать себе датасет — загрузить его в определенную папку на гугл диске — зарегистрироваться на huggingface (https://huggingface.co/) — подтвердить почту на huggingface
что такое датасет датасет это набор картинок-примеров, по которым модель «понимает», что именно вы хотите от неё получить.
!!! Модель!!! ничего не «понимает» как человек. Она смотрит на картинки и ищет повторяющиеся признаки:
что повторяется, то модель считает важным что случайно меняется, то модель считает неважным
Если в датасете везде синий цвет, белые силуэты и бумажная фактура — модель решит: «ага, это часть стиля» Если в датасете везде цветы — модель может решить: «ага, стиль = цветы» Если в датасете везде один и тот же человек в одной красной куртке — модель может решить: «человек = красная куртка».
хороший стилевой датасет: разные объекты + похожая техника разные композиции + похожая палитра разные сюжеты + похожая фактура
плохой стилевой датасет: везде только цветы везде только один человек везде только один ракурс везде одна и та же картинка с небольшими отличиями
сколько нужно картинок: минимум: 15-20 изображений нормально: 30-80 изображений определенно ту мач: 100+
ваш ход действий (умоляю ОЧЕНЬ важно, следите за регистром букв) — копируйте у меня здесь)
- открываем Google Drive (https://www.google.com/intx/ru/drive/)
- в «Мой диск» создаем папку AI_LORA_CLASS
- внутри AI_LORA_CLASS создаем папку своего проекта латиницей. Например: alena_collage или zayavlenie_na_otchislenie, или nazvanie_vashego_proekta, или любое иное название
- внутри папки проекта создаем папку dataset И папку output
- загружаем все изображения только в эту самую папку dataset
!!! кроме того что загружаем картинки в папку dataset больше ничего не трогаем! в аутпут ничего не кладем, лишних подпапок не создаем!!! ПРОБЕЛЫ В НАЗВАНИЯХ ПАПОК НЕ СТАВИТЬ. ставить только нижние подчеркивания.
наше приключение начинается по ссылке ниже. это блокнот в колабе, уже полностью подготовленный.
сюда нужно обязательно зайти и подтвердить что-либо во всплывающем окне, когда у вас уже будет аккаунт на хаггинфейс.
если после перехода по ссылке ничего никто вас не спрашивает, все в порядке, просто закрывайте окно.
здесь хранятся все коды (на всякий случай) и доп материалы.
