В рамках проекта была обучена генеративная модель Stable Diffusion (SDXL) с использованием метода DreamBooth LoRA. Цель — научить нейросеть генерировать портреты в стиле Амедео Модильяни. В результате модель создаёт новые изображения, передающие характерные особенности художника.
Концепция
Для обучения использовались только портретные изображения, поэтому модель фокусировалась на особенностях лица. Основная идея проекта — исследовать, как нейросеть воспроизводит искаженную анатомию, характерную для стиля Модильяни, и создаёт новых персонажей в этом стиле.
Исходные изображения
Для обучения использовались портреты Амедео Модильяни из открытых источников. Основное внимание уделялось лицам и анатомии, так как именно эти элементы являются ключевыми в стиле художника.
Исходные изображения объединяет ряд характерных особенностей: — вытянутые пропорции лица — упрощённые черты — минимальная детализация — мягкая цветовая палитра Эти признаки стали основой для обучения модели.
Генерации
Для генерации изображений использовались текстовые промпты, описывающие персонажей: man with stubble side profile; mature man gray temple hair; young man oval face blue eyes; portrait man short beard smoking; man long neck white collar; artist self portrait style; man thin features intense gaze; gentleman bowler hat shadow; young man crossed arms; portrait man small mouth; man with mustache profile; worker portrait simple pose; gentleman reading newspaper; man melancholic expression; elderly man oval face;
woman with long neck reading book; young woman side profile blue dress; mature woman oval face red lipstick; girl almond eyes pale skin; woman flowing hair muted colors; portrait woman small mouth expression; seated woman elongated figure; woman thin nose; high cheekbones; girl with bob haircut; woman in profile hat shadow; young woman melancholic gaze; woman crossed arms pose; portrait woman earrings minimal; woman smoking jazz style; girl with pearl necklace;
Анализ генераций
В ходе обучения модель овладела ключевыми характеристиками стиля Амедео Модильяни. На созданных изображениях видны вытянутые пропорции лиц, упрощенные формы и характерная стилизация, которая близка к оригинальным произведениям художника. Особое внимание стоит уделить тому, как модель интерпретирует анатомические особенности. Лица часто получаются намеренно деформированными: удлиненные шеи, узкие носы, маленькие рты и упрощенные глаза. Это свидетельствует о том, что нейросеть не просто воспроизводит изображения, а усваивает визуальные закономерности стиля. При этом каждое изображение остается уникальным. Персонажи различаются позами, ракурсами и деталями: в некоторых случаях мы видим профиль, в других — фронтальный портрет, изменяются аксессуары, одежда и цветовая палитра. Это указывает на способность модели генерировать вариации в рамках заданного стиля. Также можно заметить, что степень искажения варьируется. В некоторых изображениях анатомия более приближена к реальности, в других — сильно стилизована. В отдельных случаях встречаются небольшие артефакты или неточности, однако в целом стиль воспроизводится стабильно и узнаваемо. Таким образом, модель успешно справляется с задачей генерации новых персонажей, сохраняя визуальный язык оригинального художника.
Процесс обучения включал загрузку подготовленного набора изображений, генерацию вспомогательных изображений общего класса и обучение LoRA — дополнительных параметров, адаптирующих модель под выбранный стиль. Для генерации использовался кастомный промпт: «in the style of Modigliani». Количество шагов обучения было увеличено, что позволило добиться более точной передачи стиля.
Использование ИИ
Список использованных инструментов: — Google Colab — обучение SDXL DreamBooth LoRA — ChatGPT — помощь при написании кода и решении технических проблем — NanoBananaPro — улучшение качества изображений
