Натренировал новую SDXL версию своей лоры под стиль аналоговых фото 90-х. LoRa добавляет тени от вспышки, утечки света, цвета в стиле ломо. Для SDXL версии пришлось пересобрать датасет, исправить описания и неделю поэксперементировать с параметрами. Скачать для экспериментов можно на HuggingFace.
Для ностальгирующих по эстетике 90х. После пары недель экспериментов с kohya_ss и подробом параметров зарелизил вторую версию LoRa для создания картинок в стиле фотографий на мыльницы со вспышкой. Скачать для экспериментов можно на Civitai. По сравнению с первой версией эту лору можно использовать с большей strength не ломая изображение. В последний заход потратил часов восемь на тренировку и около 80 эпох. По факту оказалось, что после 5-6 эпох LoRa уже сильно перетренирована, хотя Loss так и не достиг минимума и продолжал уменьшаться. ...
Добавил новую функцию для telegram-бота @pixelmuse_bot. Теперь на вход ему можно отправить кривой рисунок с командой в описании /imagine2 текст запроса и на выходе получить что-то осмысленное и даже красивое. Как это работает под капотом. Никакой магии, для управления нейросетью используем controlnet. Controlnet заставляет нейросеть использовать информацию о границах объектов как опору для создания нового изображения. После получения изображения от пользователя обрабатываем его с помощью cv2.Canny для определения краев. Тут пришлось поэксперементировать с параметрами чтобы края определялись в том числе на фотографиях, где переходы, например на лице, могут быть плавными, а потеря этих границ даёт модели слишком много свободы для творчества. ...
В общем, кому не хватало Midjourney у нас дома - добро пожаловать в @pixelmuse_bot. Что бот умеет на данный момент: Создавать картинки по текстовому запросу Используется автоматический машинный перевод текста на английский, поэтому запрос может быть практически на любом языке Можно выбрать из 5 моделей: реализм, аниме, киборги, sci-fi окружение, стикеры (по факту под капотом две модели + разные LoRa) Можно загрузить свою фотографию для обработки img2img Можно сделать апскейл результата x1.5. Для апскейла используется нейронка Real-ESRGAN Даю 20 токенов для тестов (20 изображений) с лимитом 10 токенов в день Dev-лог Какое-то время ковырял Stable Diffusion в Автоматик111 и ComfyUI. В один прекрасный депрессивный день решил посмотреть, как работать с сетью напрямую в python. Сделать это можно с помощью библиотеке diffusers от Hugging Face. Написал пятистрочный скрипт и подумал почему бы ради прикола не приделать к нему телеграм бота, и тут понеслось. ...
Поэксперементировал с генерацией изображений нейросетью Stable Diffusion. Сеть умеет text-to-image - создавать изображения по текстовому описанию. Очень забавно. Выше мои попытки “нарисовать” что-то. Попробовать и посмотреть творчество других людей можно тут https://www.mage.space/ Сначала хотел написать, что нейросеть это не искусство, что это просто результат сложного бросания кубиков. Кроме того, сеть обучена на большом количестве фото, картин и рисунков разных авторов без их разрешения. С другой стороны, живые люди так же учатся глядя на картины, смотря фильмы, постановки которые были созданы кем-то другим, вдохновляются этим, подсматривают идеи и приёмы. ...
Газета.ру продолжает поставлять интересную информацию про живописцев. Сегодня узнал, что было такое направление во второй половине 19-го века в Англии, как прерафаэлиты. Создали его несколько отщепенцев от классической школы живописи. Довольно интересная история, хоть и короткая. Собственно название направление означает, что они брали пример с художников писавших до Рафаэля и Микеланджело, которых они считали основателями классицизма и академической школы. А привлекала их ранняя флорентийская живопись с её простотой. Ну вот, и тут мы подходим к одной из особенностей этого направления, к образу женщины. Прерафаэлиты пытаются привлечь внимание к социальному неравенству и униженному положению женщин, и начинаю изображать новый для живописи тип женщин: красивых, независимых, мистических, фатальных, la femme fatale. Позже этот образ перекочевал в направление модерн. Да и вообще часть их работ напоминает раннее возрождение, а часть - модерн. И оба направления мне очень нравятся! И собственно мне понятно, что за женщин они рисовали: красивая, желанная и при этом смертельно опасная, Персефона из потустороннего мира. Это же описание Анимы. Ну или одной из ипостасей Анимы, Лилит, которая была до Евы. Кстати, похоже “Алёнушка” Васнецова из этой же серии, очень похожа по настроению (возможно кто-то у кого-то подсмотрел) и по времени написания примерно попадает в тот же период. ...
Раку-яки — это особый вид японской керамики, выполненной в духе ваби-саби (простота, ржавчина, скромность), короче эстетика дзен: неправильная форма чашки, подтёки глазури и трещинки. Традиционно используется в японских чайных церемониях. Википедия по этому поводу сообщает: “Ваби-саби трудно объяснить, используя западные понятия, но эту эстетику порой описывают как красоту того, что несовершенно, мимолётно или незаконченно. По сути, ваби-саби это понятие, характеризующие присущий японцам эстетический вкус, способность воспринимать прекрасное и предметы искусства в своём естестве, неподдельности и без излишеств.” Мне кажется википедия не совсем права по поводу трудности, во всяком случае относительно России. Вся российская глубинка пропитана духом дзен и эстетикой ваби-саби: доска у колодца лежащая столько лет, что все думают, что она была там всегда, дорога в первозданной красоте глиняных комьев вперемешку с одуванчиками, ржавый экскаватор посреди поля,… все пропитано духом ваби-саби и безмолвием дзен. ...