Original size 1140x1600

Обучение нейросети стилю Meybis Ruiz Cruz

PROTECT STATUS: not protected
16

Проект описывает процесс обучения модели Stable Diffusion для генерации портретов в стиле художницы Meybis Ruiz Cruz, используя Kaggle и пользовательский датасет. Основная цель — создание нейросети, способной воспроизводить уникальный стиль художницы в сгенерированных изображениях.

big
Original size 1445x470

Подготовка датасета

big
Original size 5162x1992

Часть датасета

Для обучения нейросети был собран датасет из 50 работ художника. Автор специализируется в большей степени на портретах, соответственно, нейросеть чаще выдает погрудный или головной портрет.

В работах художницы прослеживается небольшая вариация стилистики: от сильно мультяшной до живописного реализма. Однако во всех работах содержатся «уверенные» мазки фактурных кистей, «угловатость» и чередование заливочных цветов и градиентов.

big
Original size 1440x318
big
Original size 1444x807

Передача параметров обучения через командную строку

Результаты обучения

Original size 3202x1024
Original size 4354x1024

prompt = «photo portrait in Meybis Ruiz Cruz style, Marilyn Monroe, front view, red lips, red dress, daytime»

Первым делом бы протестирован вариант генерации портрета Мэрилин Монро. Результаты показали неточную схожесть с актрисой, однако стиль рисовки считан удачно.

Как и работы автора, сгенерированные изображения немного варьируются пропорциями. Тем не менее каждый рисунок хорошо имитирует живописные мазки, это заметно как на лицах, так и на волосах.

Original size 2091x1024

После проб сгенерировать стилизованный портрет актрисы, было решено прописать в промптах рандомные характеристики внешности, такие как: мужчина с короткими темными волосами и серыми глазами, грустное выражение лица

Original size 3158x1024

prompt = «photo portrait in Meybis Ruiz Cruz style, сhest-length portrait, young guy, blue eyes, sad face, red curly short hair, black glasses»

Original size 2091x1024

prompt = «photo portrait in Meybis Ruiz Cruz style, сhest-length portrait, young guy, blue eyes, sad face, red curly short hair, black glasses, daytime, bright saturated colors»

Два сгенерированных изображения выше вариант мне показались максимально удачными в плане попадания в стиль, даже не смотря на немного «поломанную» анатомию.

Original size 3202x1024

prompt = «photo portrait in Meybis Ruiz Cruz style, сhest-length portrait, little girl, orange eyes, black hair, daytime, bright saturated colors»

Original size 2091x2091

prompt = «photo portrait in Meybis Ruiz Cruz style, сhest-length portrait, black woman, black afro hair, daytime, highly saturated colors»

Original size 3202x1024

prompt = «photo portrait in Meybis Ruiz Cruz style, white woman, yellow hair, highly saturated colors,»

Original size 2091x2091

prompt = «photo portrait in Meybis Ruiz Cruz style, сhest-length portrait, white man, freckles, yellow hair, highly saturated colors,»

Original size 3202x1024

prompt = «photo portrait in Meybis Ruiz Cruz style, kid, red hair, daytime»

Original size 2091x1024

prompt = «photo portrait in Meybis Ruiz Cruz style, a woman with a cigarette in her mouth, red hair, daytime»

Original size 1024x1024
Original size 3202x2113

prompt = «photo portrait in Meybis Ruiz Cruz style, сhest-length portrait, girl, dark eyes, black hair, saturated colors»

Обучение нейросети стилю Meybis Ruiz Cruz
16