Концепция
Мауриц Корнелис Эшер — нидерландский художник-график, известный в первую очередь изображениями с искривлением пространства. Идея была в том, чтобы попробовать повторить замощения пространства с помощью «плиток», напоминающих по форме животных, с помощью искусственного интеллекта.
Мауриц Корнелис Эшер. Справа: Пегас (№ 105), 1959 г. Посередине: Ящерица (№ 25), 1939 г. Справа: Заполненная плоскость I, 1951 г.
Исходные изображения
На 1 курсе я писала визуальное исследование про работы Эшера, и изображения из него стали основой для датасета. При этом генерировать я решила только замощения плоскость с помощью «плиток» в виде животных.
Процесс обучения
В Kaggle был запущен блокнот и загружены необходимые библиотеки. Затем добавлены заранее уменьшенные и обрезанные картинки, которые составили датасет.
Через BLIP были добавлены описания, был произведён логин в Hugging Face и затем запущено обучение нейросети со следующими параметрами.
Обученная нейросеть была загружена на Hugging Face. Далее были сгенерированы изображения, прикрепленные ниже.
Результаты
prompt: ink picture in ESCHER style of interlocking winged horse tiles, black silhouettes against solid white background, perfect tessellation pattern, heads necks wings bodies seamlessly connect forming infinite repeating surface, high contrast two-tone graphic art, intricate impossible geometry
prompt: ink picture in ESCHER style of interlocking lizard tiles, flat shadowless colors, perfect tessellation pattern, heads necks wings bodies seamlessly connect forming infinite repeating surface, high contrast two-tone graphic art, intricate impossible geometry
prompt: ink picture in ESCHER style of interlocking fish tiles, flat shadowless colors, perfect tessellation pattern, heads necks wings bodies seamlessly connect forming infinite repeating surface, high contrast two-tone graphic art, intricate impossible geometry
prompt: ink picture in ESCHER style of interlocking fish tiles, flat shadowless colors, perfect tessellation pattern, heads necks wings bodies seamlessly connect forming infinite repeating surface, high contrast two-tone graphic art, intricate impossible geometry
prompt: ink picture in ESCHER style of interlocking birds and fish tiles, flat black and white colors, perfect tessellation pattern, heads necks wings bodies seamlessly connect forming infinite repeating surface, high contrast two-tone graphic art, intricate impossible geometry
prompt: ink picture in ESCHER style of a single seal on ice relaxing on a sunny day
Используемые инструменты и описание применения генеративных моделей
— Kaggle для запуска кода
— LoRA для обучения
— BLIP для генерации названий картинкам датасета
— Hugging Face для сохранения модели
— Adobe Photoshop для коллажей
— Img.Upscaler для апскейла обложки
— Perplexity для помощи с проектом