Чувства, музыка, машина это серия сгенерированных картинок при помощи обученной нейросети Stable Diffusion XL.
Я обучала нейросеть своим работам за последние три года. Долго думала над концепцией в итоге пришла к тому, что хочу совместить два своих любимых занятия в этом проекте: рисование и музыку. Стало интересно как будет работать тандем чувственного человеческого и машинного бесчувственного.
Любопытно было, как нейросеть, используя мой стиль рисования, интерпретирует названия моих любимых песен.
В промпте также прописывала чувства, которые вызывала каждая из песен.
Некоторые из моих работ, которые использовались в обучении


Так как я рисую преимущественно людей, большая часть работ, по которым училась нейросеть была без проработанных фонов. Из-за этого в последствии возникали некоторые трудности с генерацией картинок. К этому нюансу вернемся немного позже.
Пробы
Сначала я решила посмотреть какие картинки получаются в принципе при генерации с помощью этой машины. Задавала какие-то односложные промпты без уточнений.
Изображение, сгенерированное нейросетью
В целом нейросеть уловила моменты моего стиля. где-то небрежные мазки и лайн, плоские заливки. Цветовые решения так же похожи на картинки, которые были приложены для обучения.
Изображение, сгенерированное нейросетью
Изображение, сгенерированное нейросетью
Абстрактные сюжеты
Я решила посмотреть, на что будет делать уклон генерация, если я буду задавать размытые описания с акцентами на эмоциональное состояние: радость, гнев, печаль, другие. Добавляла в некоторых случая ассоциативные уточнения, например, острый к гневу или круглый к счастью. В некоторых случаях получить, нечто абстрактное удалась на ура, в других же генерация стала вырисовывать какие-то человекоподобные элементы.
Изображения, сгенерированное нейросетью
Пейзажи
С пейзажами ситуация обстояла сложнее. При генерации так и всплывали образы людей, очень часто приходилось прописывать дважды БЕЗ ЛЮДЕЙ. В таком случае получалось сгенерировать изображение пейзажа.
Изображение, сгенерированное нейросетью
Предметы
Отдельные изображения предметов выходили прикольными, но еще меньше были похожи, на мою рисовку. Опять же, думаю, что проблема в первоисточнике с моими рисунками людей.
Изображения, сгенерированное нейросетью
Забавное изображение наушников с глазками получилось, хотя в промпте я написала только слово «наушники». Круто, что нейросеть подметила мой прикол добавлять всему глазки.
Изображение, сгенерированное нейросетью
В некоторых генерациях так и не получилось избавиться от наличия человеческих фигур.
Изображения, сгенерированное нейросетью
Животные
Некоторые отдельные изображения животных: собака, лошадь и кот.























