Обучение генеративной модели Stable Diffusion под стиль аниме Хаяо Миядзаки
ИДЕЯ
Идея для обучения генеративной нейросети заключается в том, что бы обучить ее рисовать персонажей в стилистике аниме Хаяо Миядзаки. Для обучения я собрала датасет из квадратных картинок, в одинаковом разрешении, со стоп кадрами из различных произведений.
ИСХОДНЫЕ ИЗОБРАЖЕНИЯ
Для обучения были взяты 38 стоп кадра из разных аниме Хаяо Миядзаки. Все они отформатированы под единый размер. Чтобы модель смогла считать стиль аниме для генерации будущих картинок при сборе изображений ключевой задачей стал поиск кадров с портретами персонажей, природой, интерьерами и вымышленными существами.
ПРОЦЕСС ОБУЧЕНИЯ
1. Загрузка изображений.
2. Процесс обучения.
3. Загрузка обученной модели на HuggingFace.
Готовая серия изображений
The house on the mountain; A car is driving on a Japanese highway; Japanese village in summer
A father walks around Tokyo with his child; The family dines at the table
Ghibli-style sunset beach; Sakura garden with a river and a bridge crossing it
Japanese car drift; Car at dusk at the gas station; Formula 1 car in Suzuka
Photo collage in ghibli style, times square, new york; The skyscraper quarter
An eagle diving into a rocky river near a waterfall; A bear climbing a cliff at dawn
Сoffee shop with a veranda; Vinyl Store; The interior of the living room with a window overlooking the garden
