Концепция
Современные нейросетевые технологии позволяют создавать реалистичные изображения, включая лица и персонажей, в заданном стиле. Игра The Sims 4 имеет уникальную визуальную эстетику — упрощённую, мультяшную, но при этом выразительную. Целью данного проекта является исследование возможностей генеративных моделей для создания новых персонажей в стиле The Sims 4, вдохновлённых вселенной Сумерек, а именно — образами злодеев и антагонистов, угрожавших Белле.
Цель проекта Создать модель, способную генерировать оригинальных персонажей в эстетике The Sims 4, сохраняя узнаваемые черты злодеев из Сумерек (например, Виктории, Джеймса, Вольтури и др.), но без прямого копирования реальных изображений или актёров.
Исходники для обучения
В качестве исходных данных я решила использовать фотоархив игроков Sims 4 с различными персонажами, которых они создавали. Изображения были разнообразны: где-то просто портретный вид лица, где-то в полный рост, какие-то из персонажей находились в игровом мире, а не в редакторе.
Процесс обучения, пробные варианты
После обучения начался забавный процесс проб и ошибок. Понадобилось немало попыток, чтобы подобрать качественный и подходящий промпт для каждого персонажа.
промпт: «photo collage in SIMS style, Ultra detailed alone portrait of Michael Sheen as Aro Volturi, long dark straight hair, red vimpire eyes, pale translucent skin, expressive hands, black and red robes, manic intellectual expression, mind-reading intensity, theatrical gestures, cinematic lighting»
Важно отметить, что я не использовала фотографии самих персонажей саги для обучения и не просила переделывать изображение по аналогии, нейросеть сама искала референсы и воплощала их в реальность, что иногда получалось очень смешно.
промпт: «photo collage in SIMS style, alone photorealistic portrait of Aro Volturi, red vimpire eyes, long black hair»
Ещё иногда Stable Diffusion как будто бы не понимал, кого нужно изобразить, и просто делал всех с типично вытянутыми длинными лицами, что было не похоже на заданных персонажей. Тоже приходилось уточнять и детализировать промпт, чтобы прийти к приемлемому результату.
промпт: «photo collage in SIMS style, alone photorealistic portrait of Felix Volturi, massive muscular build, bald head, intimidating expression, black leather armor, enforcer stance, Volterra guard post, aggressive readiness, bodyguard physique, low-angle shot, powerful presence»
Также во время генераций возникли проблемы: персонажи получались слишком длинношеими, что выглядело непропорционально и странно, а ещё не всегда получалось добиться красных вампирских глаз. Однако после уточнений деталей промпта всё-таки всё получилось.
Дакота Фэннинг в роли Джейн Вольтури в саге «Сумерки» и её генерация
промпт: «photo collage in SIMS style, alone photorealistic portrait of Jane Volturi, red vimpire eyes»
Итоговая серия
В итоге у меня получилась интересная серия из злодеев-вампиров, угрожавших безопасности главной героини, и собственно сама Белла!
Алек Вольтури из саги «Сумерки»
промпт: «photo collage in SIMS style, alone photorealistic portrait of Alec Volturi, red vimpire eyes, dark hair»
Аро Вольтури из саги «Сумерки»
промпт: «photo collage in SIMS style, Ultra detailed photograph of Michael Sheen as Aro Volturi, long black hair, red eyes, pale translucent skin, expressive hands, black and red robes, manic intellectual expression, Volterra library background, clutching ancient books, mind-reading intensity, theatrical gestures, cinematic lighting»
Феликс Вольтури из саги «Сумерки»
промпт: «photo collage in SIMS style, alone photorealistic portrait of Felix Volturi, red vimpire eyes»
Виктория из саги «Сумерки»
промпт: «photo collage in SIMS style, Ultra realistic portrait of Rachelle Lefevre as Victoria, red eyes, wild fiery red curls, fierce vengeful expression, athletic build, black casual clothes, forest fire background, cat-like movement, revenge-driven intensity, flowing hair motion, orange-toned lighting»
Ирина Денали в саге «Сумерки»
