Обучение генеративной нейросети Stable Diffusion под стиль неопластицизма
Идея проекта
Меня всегда интересовало абстрактное искусство, его история и художники, которые творили в этом стиле. Я решила взять за основу неопластицизм, так как это один из видов абстрактного искусства и, по сути, это концепция геометрического абстракционизма.
Пит Мондриан — Композиция А, 1923 / Пит Мондриан — mondrian12, год неизвестен
Мне не хотелось обучать нейросеть рисовать по чужим работам современных художников, поэтому мой выбор пал на Пита Мондриана. Также было интересно создать что-то, не имеющее формы и сюжета, где всё должно быть структурировано четко и ограничено палитрой.
Пит Мондриан — Композиция в серых и светло-коричневых тонах, 1918 / Пит Мондриан — Композиция с желтым пятном, 1930
Процесс обучения
Сначала я импортировала все необходимые библиотеки и проверила графический процессор
Мною была создана новая директория и туда же я внесла свою базу данных. В основу было выбрано 26 картин Пита Модриана, написанных в стиле неопластицизма.
Далее я обработала изображения и также добавила подписи для того, чтобы модель думала в нужном мне направлении.
Я проверила отображаются ли мои изображения и посмотрела на 5 картинах
Проверив, что мои данные сохранились, я перешла к тренировке модели. Перед этим я очистила память и установила нужную библиотеку. Код грузился больше всех предыдущих. Примерно мне потребовалось 45 минут на его выполнение
Сохраняю модель и меняю данные на свои аргументы. Всё было готово для использования, поэтому далее я начала вводить свой первый запрос
Первый промт загрузился достаточно быстро, примерно 1-2 минуты мне потребовалось Для запроса я оставила первую часть, где указала в каком стиле рисовать, а в следующей меняла свои пожелания и экспериментировала
Результирующая серия изображений
prompt: the big blue pattern
Композиция с небесно-голубым — Создано обученной моделью
После первого запроса и получения данной работы я поняла, что мне нужна небольшая коллекция в стиле неопластицизма. Названия были подобраны в духе Мондриана. Эта работа называется «Композиция с небесно-голубым», так как изображение не учитывает главные правила, используемого мной стиля, а именно: строгое использование только черных, белых, синих, красных и желтых цветов. Здесь этого не было учтено, однако мне захотелось её оставить, ведь своей цветовой уникальностью она выделяется среди классических работ. Так началась небольшая серия.
prompt: red rectangle pattern
Композиция цвета красного мяса № 1 и Композиция цвета красного мяса № 2 — Создано обученной моделью
После вышеуказанной работы появились на свет ещё две, однако в совершенно другой цветовой гамме. Я указала один из основных цветов — красный. Модель создала очень разное настроение и разнообразную подборку оттенков красного. Первая композиция более дикая и тревожная из-за огромного количества прямоугольников, в то время как вторая более спокойная и простая. Такой разброс в оттенках не соответствует правилам данного абстрактного стиля, и модель это понимает не очень хорошо. Однако она сделала изображение, полностью состоящее из прямоугольников, что соответствует запросу.
prompt: minimalistic painting with one blue square
одинокий синий № 1 с нюансом — Создано обученной моделью
Далее была создана серия из трёх картин, посвящённая трём основным цветам неопластицизма. Самая первая из этой серии стала «Одинокий синий № 1 с нюансом», где я попросила модель нарисовать минималистичную композицию с одним синим квадратом. Она добавила желтый и красный, что не входило в мой запрос, однако основной промт она выполнила. Хорошо расположенная с точки зрения композиции, совсем небольшая красная полоска работает как нюанс, так что справилась неплохо.
prompt 1: minimalistic painting with one red square prompt 2: minimalistic painting with one yellow square
Одинокий красный № 1 / Одинокий жёлтый № 2 — Создано обученной моделью
Следующие две картины из этой серии модель создала также с добавлением остальных цветов, однако я решила это оставить так как смотрелось хорошо. В «Одиноком красном № 1» присутствует больше лишних деталей, чем во второй работе. Однако, композиционно она выглядит лучше
prompt: a painting with a black square in the middle
Одинокий чёрный № 1 — Создано обученной моделью
Дополнительно я создала картину с черным квадратом. Одна из самых удачных, да, тут присутствуют и другие цвета, но выглядит достаточно хорошо.
prompt: the painting is in the quadrilateral format
Композиция Заполненность / Композиция Пустота — Создано обученной моделью
Из этого запроса родились две работы. Изначально я хотела, чтобы само изображение вписывалось в четырёхугольную фигуру, но модель не смогла этого сделать. Получились не только четырехугольники, но и треугольники. Несомненно, это красиво, но не соответствует тому, чего я хотела.
prompt: painting on the wall in the interior
Композиционный интерьер — Сделано обученной моделью
Далее наступило время экспериментов, и я ввела запрос, в котором попросила показать картину с интерьером. На самом деле я ожидала не этого, но поняла, что здесь изображён интерьер, интерпретированный в стиле неопластицизма. Получилась не такая однородная композиция, как в прошлых сериях.
ИТОГ
Серия итоговых изображений
Обученная модель показала неплохие результаты. Она хорошо определяет цвета, формы и в целом выполняет основные запросы. Получилась неплохая коллекция в стиле неопластицизма. Всё-таки человеческую оригинальность и мастерство никто не заменит. Особым композиционным видением нейросеть не обладает, но как эксперимент выглядит неплохо.
