Концепция
В рамках проекта я исследовала возможность переноса художественного стиля импрессионизма в современный контекст. В качестве основы был выбран стиль Camille Pissarro — одного из ключевых представителей французского импрессионизма XIX века.
Основная идея проекта заключается в том, чтобы представить известные города и архитектурные объекты современности так, как если бы они были написаны художником XIX века.
Проект направлен на создание визуального диалога между эпохами: современные архитектурные образы интерпретируются через художественный язык импрессионизма, что позволяет по-новому взглянуть на знакомые места.
Собранный датасет
Для обучения модели был собран датасет, состоящий из работ Camille Pissarro, находящихся в открытом доступе. В выборку вошли преимущественно городские пейзажи: улицы, бульвары, площади и сцены повседневной жизни.
Особое внимание уделялось изображениям с выраженной атмосферой, мягким освещением и характерной для импрессионизма цветовой палитрой. Перед обучением все изображения были приведены к единому формату, что позволило повысить стабильность обучения модели.
Итоговые изображения
«painting in the style of camille pissarro, painting of paris city, eiffel tower in the view, golden hour, green blue pink and yellow palette»
«painting in the style of camille pissarro, painting of Moscow city, red square, grey, white, blue palette»
«painting in the style of camille pissarro, painting of Samarkand city, green, registan, yellow, grey, white, blue palette»
«painting in the style of camille pissarro, painting of Vienna city, green, pinkish, white, , dark blue, blue palette»
«painting in the style of camille pissarro, painting of Toronto city, Ontaroi, green, turquoise, dark blue, blue palette»
«painting in the style of camille pissarro, painting of Taj Mahal, in front of taj mahal fountain seen with blea water, with clear blue sky and orange sunset»
«painting in the style of camille pissarro, painting of Venice, in front of city on the water, gondolas with blue water, with clear Gray-blue sky, colorful walls of houses»
В результате обучения была получена серия изображений, представляющих собой известные города и архитектурные объекты, выполненные в стиле импрессионизма.
Среди сгенерированных сцен можно выделить:
городские пейзажи Москвы с характерной архитектурой атмосферные виды Венеция с каналами и мягким освещением интерпретацию Тадж-Махал в живописной манере
Все изображения сохраняют ключевые особенности стиля Camille Pissarro: мягкие мазки, размытые контуры, естественную цветовую палитру и внимание к свету и атмосфере.
В результате современные локации воспринимаются как картины XIX века, что создаёт эффект переосмысления привычных визуальных образов.
Техническая составляющая
Для реализации проекта использовался подход дообучения модели с помощью метода LoRA в рамках DreamBooth. В качестве базовой модели была выбрана Stable Diffusion XL, позволяющая получать изображения высокого качества.
Обучение проводилось с использованием оптимизированных параметров: применялась смешанная точность (fp16), что позволило ускорить процесс и снизить нагрузку на GPU. Для эффективного использования памяти использовались gradient checkpointing и 8-bit Adam optimizer.
Ключевую роль сыграл параметр instance_prompt, задающий стилевую направленность генерации. Он позволил модели закрепить характерные особенности импрессионизма и применять их к новым сценам.
Количество шагов обучения было ограничено, чтобы избежать переобучения и сохранить разнообразие генерируемых изображений.
Использованные генеративные модели
В проекте использовалась модель Stable Diffusion XL (SDXL) — современная генеративная модель, предназначенная для создания изображений на основе текстовых описаний.
Для адаптации модели под художественный стиль Camille Pissarro применялся метод LoRA (Low-Rank Adaptation), позволяющий эффективно дообучать модель на небольшом датасете.
