Обучение генеративной нейросети по стилю работ Лазаря Марковича Лисицкого
Концепция
Каждый из нас слышал о творчестве Лазаря Марковича Лисицкого — советского художника и архитектора. Его работы — одни из самых выдающихся представлений русского и еврейского авангарда. Его формы и цвета картин всегда поражали меня, именно поэтому мой выбор пал на творчество этого человека.
Мой проект «Обучение генеративной нейросети» направлен на понимание и воспроизведение стиля, цвета и других характерных признаков работ Эля Лисицкого.
Примеры работ, вошедшие в базу данных для обучения искусственного интеллекта.
1. «Проун», 1923 2. Плакат «Клином красным бей белых», 1920
1. «Воспоминания о Равенне», 1914 2. «Рисунок фрагмента росписи синагоги в Могилеве», 1916
1. «Проект трибуны ораторов», 1924-е 2. «Небоскреб на площади у Никитских ворот. Общий вид сверху. Проун на тему проекта», 1920-е
Серия изображений, полученных в результате обучения нейросети генерировать изображения
Лисицкий был выдающимся архитектором, который стремился к созданию функциональных пространств, которые бы отражали дух времени. Именно поэтому в обучении генерации нейросети, в первую очередь, мне конечно же, хотелось показать архитектуру не только в эпоху настоящего, но и также город будущего, ведь работа Лисицкого — «горизонтальные небоскребы» — это действительно архитектура будущего.
промты: painting in ellisic style, skyscrapers // painting in ellisic style, night // painting in ellisic style, town of the future
Так как я учусь на направлении «дизайн интерьеров» — для меня также было важно показать интерьер квартиры, на основе работ Лисицкого.
Именно в этих работах отобразились отголоски «проунов» Лисицкого, которые были важной частью его творчества. Он стремился показать ощущение движения и пространства, используя:
- геометрические фигуры - наложение форм - яркие, контрастные цвета
промт: painting in ellisic style, a living room in an flat
Обучение нейросети изображать картины на основе работ художника, я поняла, что это будет отличный способ посмотреть, какими бы были пейзажи от Лисицкого.
Можно заметить, что, несмотря на воздушность картин, мы все равно можем увидеть геометричность мазков. Это связано с тем, что Лисицкий всегда изображал четкие и геометрические формы, что и отличает его от многих художников того времени.
промты: painting in ellisic style, holiday village // painting in ellisic style, sea
промт: painting in ellisic style, forest // painting in ellisic style, book cover // painting in ellisic style, bar with people
На мой взгляд, нейросети удалось передать стиль работ Эля Лисицкого и изобразить его. В картинках можно обратить внимание на характерные особенности его стиля работ, а также на основные цвета, которые он использует в своих работах. Также хотелось бы отметить большое количество молочного цвета, на которых изображены большинство картин Лисицкого. Нейросеть смогла уловить эту деталь и добавила ее в большое количество работ, создавая фон.
Безусловно, картинки от нейросети далеко от тех произведений искусства, которые создавал Лисицкий в свое время, но на мой взгляд, нейросеть справилась со своей задачей.
Работа над обучением нейросети
Для начала я установила все необходимое:
- зависимости - последняя версия библиотеки diffusers из GitHub - скрипт train_dreambooth_lora_sdxl.py
После — загрузила датасет с изображениями
Обучение модели:
- установление библиотеки datasets, для использования кастомных подписей - Выбор таких параметры для обучения, так как они соотносились с количеством выделяемой Kaggle памяти и занимали оптимальное количество времени:
Загрузка обученной модели:
- Загрузка кода - Добавление разных промтов - Оценка итогового изображение (настройки параметров), корректировка влияния обученной модели
