(1) КОНЦЕПЦИЯ
Каспар Давид Фридрих — выдающийся художник в направлении немецкого романтизма, чьи картины воспринимаются как философское размышление о божественном, бытии, вечности, смерти и надежде. Свет является главным инструментом передачи бесконечности в его работах, где они через дальние планы теряют чёткость, краски становятся мягкими и приглушёнными, а плавные переходы оттенков создают ощущение воздушной глубины. Новаторство Фридриха состоит в том, что он первым внёс в пейзаж духовный смысл и сделал его главной темой одинокого человека перед холодным и величественным миром. В рамках данного проекта мне захотелось изучить, как обученная модель сможет воссоздать подобную атмосферу через этот стиль в условиях сибирской эстетики.
(2) ПРОЦЕСС ОБУЧЕНИЯ
Для реализации проекта была выбрана технология LoRA (Low-Rank Adaptation). Этот метод позволяет сохранить базовые веса модели Stable Diffusion XL (SDXL) замороженными, а вместо этого обучить лишь небольшие дополнительные матрицы. Такой подход позволяет быстро и эффективно адаптировать нейросеть под конкретный художественный стиль, не перегружая видеопамять. В качестве ключевого слова-триггера (identifier token) в промте использовалась фраза sks style. Процесс обучения проводился в облачной среде Google Colab на графическом процессоре T4.
(3) РЕЗУЛЬТИРУЮЩАЯ СЕРИЯ ИЗОБРАЖЕНИЙ
После обучения модели я приступила к составлению промптов, однако не стала расписывать их слишком подробно: при излишней детализации нейросеть рисковала потерять заданный стиль и начать создавать нечто совершенно иное. Мне же хотелось, чтобы она, опираясь на увиденные работы Фридриха, сама попыталась уловить и передать эту атмосферу — пусть даже в несколько ином ключе.
Основные параметры обучения:
Базовая модель: Stable Diffusion XL 1.0.
Разрешение: 512 пикселей (с апскейлом при генерации до 1024).
Батч и градиент: Batch size — 1, накопление градиента — 4 шага (для предотвращения Out of Memory на T4).
Архитектура LoRA: Rank — 32.
Скорость обучения: 1e-4
Количество шагов: 500 (сохранение чекпоинтов каждые 250).
Оптимизация: fp16, 8-bit Adam
prompt: a lone figure in a dark coat standing on a rocky shore of Lake Baikal, back to viewer, looking at endless frozen ice, frosty mist over the water, cold blue and grey palette, low horizon, sublime scale, melancholic silence, romanticism, a painting in sks style
prompt: an abandoned Siberian village in a snowy field at dusk, crooked wooden crosses, collapsing log houses, ruins atmosphere, muted grey and ochre palette, fog, a painting in sks style
prompt: three people sitting by a campfire in a misty taiga at night, back to viewer, dark spruce silhouettes, northern lights faintly above, cold blue palette with warm fire accent, silent, romanticism, a painting in sks style
prompt: the frozen Baikal with cracked ice, a lone fisherman silhouette far away, frosty mist, low pale sun, sublime emptiness, cold palette, a painting in sks style
prompt: empty frozen Lake Baikal shore at dawn, frosty mist, no people, cold blue palette, low horizon, sublime silence, a painting in sks style
prompt: cracked ice on a frozen lake, deep blue and cyan tones, jagged rocky cliffs and small bare trees on the distant shore, frosty mist, overcast winter sky, low horizon, sublime scale, melancholic silence, romanticism, a painting in sks style
prompt: a small Siberian village under heavy snowfall, wooden houses half-hidden in snow, a lone figure walking along a path, back to viewer, muted grey and white, melancholic, a painting in sks style
prompt: traditional Siberian wooden houses, winter, fog, a painting in the SCS style.В правом нижнем углу, кажется, модель начала пытаться подписывать картины.
(4) АНАЛИЗ РЕЗУЛЬТАТОВ
Подводя итог, стоит отметить, что нейросети удалось в полной мере передать ключевые принципы творчества Каспара Фридриха, что особенно заметно в мягкости градиентных переходов. Вместе с тем периодически проявлялись и характерные для художника образы и объекты: так, при создании изображений иногда возникали готические постройки, противоречившие заданной концепции. Из-за этого приходилось внимательнее следить за составлением промпта, когда речь шла о зданиях. Несмотря на эти особенности модели, ей всё же удалось воссоздать изображения в стиле немецкого романтизма — пусть и в несвойственной ему среде.
(5) ПРИМЕНЕНИЕ ГЕНЕРАТИВНЫХ МОДЕЛЕЙ
