Обучение генеративной нейронной сети для воссоздания «Осени в России»
Концепция
Будучи иностранным студентом, прожившим в России всего 5 лет, я хочу насладиться золотой осенью в России в полной мере, прежде чем уеду.
Осенью, каждый раз, когда я смотрю на голубое небо с солнечным светом и золотыми листьями, я чувствую умиротворение больше, чем когда-либо.
Мне было любопытно, есть ли способ воссоздать воспоминания о золотой осени, которые у меня есть, с помощью нейронной сети. Поэтому для этого проекта я использовал свой личный фотоальбом, посвященный осени в России, моментам, когда я чувствовал умиротворение, чтобы посмотреть, сможет ли генеративный искусственный интеллект воссоздать воспоминания, когда у меня больше не будет возможности запечатлеть их.
Исходные изображения
На большинстве загруженных фотографий изображена листва и голубое небо. В то же время видно, что это был яркий солнечный день, и мне кажется, что листья светятся под лучами солнца. Именно такой эффект я хочу получить на созданных изображениях.
Применение генеративной модели
Establish directory to the photo album
Generate captions
Сгенерированные подписи очень вдохновляют меня, поскольку они достаточно просты, но в них отражены самые важные вещи, которые представлены в моем фотоальбоме.
Training the model
Сгенерированные изображения
Foliage of yellow, brown, and red leaves, branches, blue sky, and sunshine
Foliage of yellow, brown, red, and green leaves on 4 corners, branches, blue sky
Leaves turning yellow from green, scattered in the blue to navy sky, sunshine, branches
Leaves turning yellow and red from green, scattered in the blue sky, sunshine, branches
A line of different trees with red, yellow, and brown leaves falling in a park, blue sky and sunshine
A line of different trees with red, yellow, and brown leaves scattered in a park, blue sky and sunshine
A line of different trees with red, yellow, and brown leaves scattered in a park, blue sky and sunshine (Части, которые кажутся незаконченной работой)
По сравнению с оригинальными фотографиями листвы, сгенерированные изображения также выглядят очень реалистично. Оттенки цветов идентичны истинным цветам. Интересно, что когда я опросил небольшую группу, чтобы спросить, какие фотографии, по мнению корреспондентов, созданы искусственным интеллектом, а какие — настоящие, многие из них ответили, что моя фотография создана искусственным интеллектом, а сгенерированная фотография настоящая.
Это навело меня на мысль, что иногда природа сама по себе настолько прекрасна, что кажется нереальной, а фотографии, созданные с помощью искусственного интеллекта, настолько точно воспроизводят истинную жизнь, что кажутся такими реальными.
Однако, по сравнению с деревьями из реальной жизни, деревьям, сгенерированным нейронной сетью, при достаточно внимательном рассмотрении не хватает живости тела дерева, и есть такие части, как ветви и листва, где кажется, что это незавершенная работа.
Заключение
Поначалу сгенерированные фотографии выглядят действительно ненастоящими, потому что в них нет жизни. Чем больше я описываю то, что хочу, тем лучше модель создает изображения. Однако, несмотря на некоторые хорошие результаты, фотографии все еще кажутся ненастоящими.
Один мой друг, который тоже занимается фотографией, сказал мне, что мои фотографии не идеальны, но в них всегда есть душа. Я выбрал этот альбом в надежде, что он сможет создать что-то подобное, но в конце концов я понял, что, особенно для натуры, возможно, важнее то, как фотограф ощущает атмосферу. Это не только цвета (голубое небо, золотые листья, желтое солнце), но и воздух, ветер, температура.
На мой взгляд, такие модели лучше использовать для визуализации дизайнерских идей, чтобы показать заинтересованным сторонам, но когда дело доходит до настоящего творчества, всегда требуется душа.
