Описание проекта
Целью данного проекта была разработка и постобучение модели text-to-image для генерации изображений в уникальном стиле Винсента Ван Гога. Основная задача заключалась в том, чтобы научить нейросеть воспроизводить характерные черты творчества великого постимпрессиониста - его неповторимую манеру письма, цветовую палитру и эмоциональную насыщенность работ. Задача состояла в том, чтобы не просто перенести стиль художника на фотографии, а добиться ощущения «ручной» живописи, передающей эмоциональную энергию оригинала.
Для обучения использовалась модель переноса стиля (Neural Style Transfer). В качестве контентных изображений применялись современные фотографии пейзажей, улиц и портретов. В качестве стилевых изображений — картины Ван Гога, такие как:
- «Звёздная ночь»,
- «Подсолнухи»,
- «Спальня в Арле»,
- «Пшеничное поле с кипарисами». Эти примеры позволили нейросети усвоить ключевые черты художественной манеры: мазки, цветовые сочетания и текстурность холста.
Исходные изображения
Результирующая серия изображений
Комментарий
Модель успешно справилась с поставленной задачей и демонстрирует впечатляющие результаты в генерации изображений в стиле Ван Гога. Анализ полученных работ показывает точное воспроизведение ключевых элементов постимпрессионизма:
- Характерные вихреобразные мазки, создающие динамику и движение
- Насыщенная цветовая палитра с преобладанием глубоких синих, золотисто-желтых и оливковых тонов
- Эмоциональная интенсивность и экспрессия в передаче образов
- Узнаваемая текстура живописной поверхности
Особенно успешно модель передает особенности изображения неба с характерными спиралевидными облаками и насыщенными цветовыми переходами. Цветовая гамма полностью соответствует палитре Ван Гога, с доминированием теплых желтых оттенков и контрастных синих акцентов. Полученные результаты подтверждают, что разработанная модель способна создавать новые художественные работы, сохраняющие дух и стилистику оригинальных произведений Ван Гога, открывая возможности для цифрового продолжения его творческого наследия.
Ноутбук с кодом для обучения
https://drive.google.com/drive/folders/1VA7-9KJlCNnNa5aJuUoA8i5ETPg-xMk3?usp=sharing
Работа велась в Google Colab с помощью диффузионного пайплайна diffusers Основная структура ноутбука:
- Подготовка данных
- Сбор исходных изображений (файлы .jpg)
- Генерация текстовых описаний (промптов) для каждого фрагмента, автоматическая разметка датасета
- Код обучения
- Генерация итоговой серии
Итог
Проект показал, что нейросети способны не просто копировать живописный стиль, а создавать эмоционально выразительные художественные работы, вдохновлённые великими мастерами. Сочетание технологий машинного обучения и искусства даёт возможность не только изучать особенности стиля художников, но и развивать новые формы визуального творчества.
Изначальная цель — добиться узнаваемости стиля Ван Гога без потери структуры исходных изображений — была достигнута. В некоторых случаях нейросеть даже усилила эмоциональную составляющую, делая сцены более экспрессивными, чем оригиналы.
