Обучение нейросети: оммажи на картины в стилистике Frutiger Aqua
Концепция
Frutiger Aqua — это эстетика и стиль дизайна, вдохновлённый графикой 2000-х годов, особенно интерфейсами Windows XP, медиаплееров (Winamp, Windows Media Player) и рекламой того времени.
Для Frutiger Aqua характерны яркие, полупрозрачные градиенты, часто с эффектом «аква-стекла», блики, прозрачность, пузырьки, волны.
Исходные изображения для обучения
Так как стиль Frutiger Aqua основан на dijital элементах вместе с яркими и чистыми цветами и природой, я решила сделать серию контрастных по смыслу изображений и посмотреть, как в этом стиле будут выглядеть известные картины прошлых веков
Исходные изображения для обучения
До-обучение нейросети
Для проекта используется технология Stable Diffusion, которая до-обучается через Kaggle на основе стандартного ноутбука SDXL DreamBooth LoRA
1. Был собран и добавлен в ноутбук датасет из 27 изображений в стиле Frutiger Aqua, которые были предварительно кадрированы до размера 1500×1500 px и конвертированы в формат jpg
2. С помощью модели BLIP к каждому изображению из датасета было добавлено описание, начинающееся с префикса «Image in FRUTIGER style», который будет в последующем использоваться в промтах
3. Выбраны итоговые параметры для модели: - разрешение 512 - 500 шагов Обучение длилось 2 часа
(В предыдущие 5 попыток до-обучения с более высокими параметрами оно останавливалось)
4. После завершения обучения модель была сохранена на huggingface.co
Генерация изображений
1. image in FRUTIGER style, painting «Still-life with a skull» by Paul Cezanne 2. image in FRUTIGER style, painting «Bundles of asparagus» by Eduard Manet
1. image in FRUTIGER style, «Italian noon» by Caravaggio 2. image in FRUTIGER style, «Morning in the pine forest» by Shishkin
1. image in FRUTIGER style, «9th shaft» by Aivazovsky 2. image in FRUTIGER style, «Starry Night» by Van Gogh
1. image in FRUTIGER style, «Impression» by Claude Monet 2. image in FRUTIGER style, «Sunflowers» by Van Gogh
1. image in FRUTIGER style, «The Black Square» by Kazimir Malevich 2. image in FRUTIGER style, «The Lutenist» by Caravaggio
Модель смогла уловить характерные для Frutiger Aqua стиля цвета, но в плане текстур и вида объектов больше опиралась на существующие картины, из-за чего получившиеся изображения не полностью отражают нужный стиль
Ссылка на HagginFace
Ссылка на блокнот
