Идея проекта
В проекте была дообучена генеративная нейросеть Stable Diffusion методом LoRA на небольшом авторском датасете чёрно-белых портретов. Идея состояла в том, чтобы модель переняла не одного конкретного персонажа, а общий художественный стиль: монохромную графику, упрощённую форму лица, характер и текстуру линии и особенно способ изображения носа, глаз и волос.
Примеры портретов
Примеры портретов
В итоговой серии представлены 12 новых портретов, выполненных в том же стиле. По результатам видно, что нейросеть смогла передать основные особенности исходных изображений: чёрно-белую палитру, условную и немного деформированную схему лица, графичность, выразительную линию и общий принцип построения портрета. При этом изображения отличаются друг от друга типом внешности, формой причёски, выражением лица, одеждой и степенью условности, поэтому серия получилась не полностью однотипной, а вариативной внутри одного визуального языка.
Первая серия
Первая серия показалась недостаточно отражающей оригинальный стиль, поэтому я улучшила код на этапе обучения LoRA: увеличила max_train_steps с 700 до 900.
Вторая серия
Вторая серия более точно воспроизвела особенности оригинальной стилистики, и изображения стали сильнее напоминать мои портреты.
Описание применения генеративной модели
В проекте использовалась генеративная модель Stable Diffusion v1.5, дообученная методом LoRA на авторском датасете портретов. ИИ применялся для генерации новой серии изображений в едином художественном стиле. Дополнительно ChatGPT использовался для проработки идеи, настройки обучения и написания экспликации.
