Идея проекта
Данный проект основан на моих глиняных работах за последние 3 года. Моя цель — научить генеративную обучаемую модель создавать визуальный работы того же уровня. В основе работы лежит моя собственная вовлеченность, как автора оригинальных изделий, а также интерес к тому, что может получиться. В конечной серии у меня получилась серия картинок, состоящая из персонажей или образов героев, над которыми я проводила работу.
Больше всего хотелось узнать как нейросеть сможет передать колорит работ и научиться самостоятельно работать в похожем ключе. Акцент на утонченности и пастельном вайбе.
Исходники
для обучения изображения были переведены в 512×512
для обучения изображения были переведены в 512×512
для обучения изображения были переведены в 512×512
Обучение
Для обучения нейросети я использовала Google Colab и DreamBooth LoRA на базе Stable Diffusion XL. Датасет состоял из 17 моих работ (я сразу порезала их на 512×512). Обучение было на базе движка Lora, все созданные картинки находятся в той же директории. Обучение длилось около часа, после чего я подключила полученные веса к SDXL-модели.
Итог
ссылка на код
ссылка на датасет
