Проект по нейросетям «выходные на Марсе»

Для обучения нейросети я выбрала один из своих проектов-иллюстраций. Он посвящен внеземному туризму. Это мир, где разные расы инопланетян путешествуют на другие планеты и занимаются типичными туристическими активностями: гуляют по центру города, отдыхают у бассейна, исследуют останки древней цивилизации

Обучение было не очень стабильное, лосс сильно варьировался от семпла к семплу, но постепенно уменьшался в среднем.

Ход работы был такой:

1. Собрала все релевантные данные
2. Загрузила в среду, подправила пути и переписала функцию для получения пар (путь, картинка)
3. Получила текстовые описания картинок предобученной моделью
4. Исправила промпт и пути в предоставленном конфиге, чтобы дообучаться на своих данных, запустила обучение
5. Сделала инференс модели со своими промптами, сохранила в папку с логами

Нейросеть сохранила ключевые особенности оригинального стиля: геометризированные фигуры, изометрию, яркую ограниченную палитру и общую логику композиции. В результате увеличился масштаб сцен, добавились персонажи и усложнилась архитектуру. Изображения выглядят как развитие исходной идеи, где происходит поток взаимодействий внутри одной локации.

При этом заметно, что генерации работают с общими принципами, чем с точным воспроизведением: пространство становится более плотным и местами не логичным, появляются небольшие искажения формы, характерные для нейросетевых моделей. Разные изображения варьируют плотность людей, структуру пространства и цветовые акценты, создавая серию вариаций на одну тему. В целом результат соответствует концепции проекта, это не копия оригиналов, а их переосмысление.