Обучение генеративной модели под стиль Ремедиос Варо
0. Рубрикатор
1. Концепция и процесс 2. Работы Ремедиос Варо 3. Генерация картинок в стиле Ремедиос Варо 4. Блокнот с кодом
1. Концепция и процесс
Данный проект об обучении генеративной модели стилю художника и создавать картины в его стиле при помощи промтов, что задает человек.
Интересно было наблюдать насколько машина сможет приблизится к стилю и понять всю особенность работ Ремедиос Варо.
Для проекта я использовала генеративную нейросеть Stable Diffusion XL с DreamBooth и LoRA, весь процесс проходил в Google Colab.
Как и положено, сначала загрузила скрипт для обучения нейросети и собираем библиотеку которую загружаем для обучения уже определенному стилю. Так же в работе использую Hugging Face.
После обучения прописываю свои промты и генерирую картинки на основе работ художницы.
2. Работы Ремедиос Варо
Ремедиос Варо Уранга (16 декабря 1908 год — 8 октября 1963 год) — испанская художница и яркий представитель представительница сюрреализма.
Ее произведения существуют между реальным миром и сном, переплетают науку и магию. В основе ее картин легли вдохновения алхимией, оккультизмом, философией и сновидениями. Именно поэтому она моя любимая художница и взяла ее работы для обучения генеративной модели, сможет ли повторить стиль и сюжеты.
Всего я собрала 25 работ в датасете для обучения
3. Генерация картинок в стиле Ремедиос Варо
Для проверки, что все работает, сначала сделала более «упрощенную» версию, а дальше уже с большей генерацией.
«art in REMEDIOS style, queen with wings in the castle»
Начала с более легких промтов. Генерация вышла хоть и не совсем в стиле художницы, но по качеству выглядит хорошо.
1. «art in REMEDIOS style, the flying cat with wings between the clouds», 2. «art in REMEDIOS style, glowing fire owl flying in night sky»
Далее удачные работы. Что бы получить нужный результат я переписывала промты и создавала несколько вариантов.
Генерации людей и окружение тоже вышли достойно и в стиле художницы.
1. «art in REMEDIOS style, the boy looking in the mirror and see old man», 2. «art in REMEDIOS style, a girl holding a glowing light in the dark castle»
1. «art in REMEDIOS style, man under water on throne», 2. «art in REMEDIOS style, ginger elf magician in green forest»
1. «art in REMEDIOS style, black knight walking towards death looking like a woman in black old dress», 2. «art in REMEDIOS style, the man standing on the cliff and see his dark twin in the abyss»
1. «art in REMEDIOS style, the mermaid playing the flute in space», 2. «art in REMEDIOS style, the magical boat sails on the dark sea at night»
1. «art in REMEDIOS style, the moon with hands in dress playing on flying piano with stars»
1. «art in REMEDIOS style, vampires sitting at a long table and an young woman is main dish», 2. «art in REMEDIOS style, glowing blue spirit in the dark room»
1. «art in REMEDIOS style, forgotten temple on the sky island»
