Немного моих нейросетевых артов

+136
Maxwellв блоге Я нейрирую двумя хвостами10 мая 2023, 16:16
Немного увлекся нейросетями, вот вам несколько артов разной степени удачности. Некоторые сделаны с помощью ComfyUI, некоторые с помощью stable-diffusion-webui.
Для генерации изображений использовалась модель стабильной диффузии под названием ponyDiffusion_v4 (Hugging Face, civitai.com).

Для большинства работ использовался следующий негативный промт:
explicit, watermark, signature, 3d, sfm, (bad quality:1.2), (bad anatomy:1.2), (derpibooru_p_low:1.2), (e621_p_low:1.1), (ugly:1.2), blurry, smooth, human, anthro, chibi, extra limbs, extra horn

Вот работы сделанные в stable-diffusion-webui, пытался их сделать в высоком разрешении и вносил правки с помощью inpaint. Но все равно получилось кривовато.
464KB Твайлайт на улице города
Позитивный промт, к сожалению, не сохранился. Он затерся при апскейле, а оригинальное сгенерированное изображение было удалено.

1.56MB Просто рандомная пони в полный рост
Та же ситуация, что и с первым изображением.

631KB Просто рандомная пони лежит
Позитивный промт, используемый в inpaint, для изменения некоторых деталей изображения:
safe, detailed complex background, (best quality:1.1), (derpibooru_p_95:1.2),(mlp style:1.2), (anatomically correct:0.9), (8k:1.2), (soft shading:0.45:1.1), hdr,(intricate digital art:1.2),( rutkowski:0.666), (detailed shading:1.2)


2.04MB Флаттершай где-то в лесу
Позитивный промт, используемые для апскейла изображения:
safe, detailed, [(anatomically correct:1.1):2], (best quality:1.1), (derpibooru_p_95:1.2), [(ultra detailed:1.2):6], [(illustration:1.1):4], [(countershading:1.2):2], [(cinematic lighting:1.0):6], [(soft shading:0.8):3], [(intricate details:1.2):5], [(by Greg Rutkowski:0.8):6]


1.37MB Флаттершай где-то среди руин
Позитивный промт, используемые для апскейла изображения:
safe, pony fluttershy, Stephan Martiniere, [(anatomically correct:1.1):2], (best quality:1.1), (derpibooru_p_95:1.2), [(ultra detailed:1.2):6], [(illustration:1.1):4], [(countershading:1.2):2], [(cinematic lighting:1.0):6], [(soft shading:0.8):3], [(intricate details:1.2):5], [(by Greg Rutkowski:0.8):6]


2.57MB Рэрити
Промта нет.


Далее идут работы сделанные в ComfyUI с парочкой кастомных нод из Derfuu Nodes и при использовании ControlNet. Эти изображения не пропускал через inpaint в stable-diffusion-webui, так что на них могут присутсовать мелкие дефекты.
Так-же была использована Oil painting style LoRA со следующими параметрами:
strength_model: 0.56
strength_clip: 0.56
И ControlNet модель control_sd15_scribble, с параметром силы 0.56.
Позитивный промт:
(masterprice:1.1), (best quality:1.1), (derpibooru_p_95:1.2), (ultra detailed:1.2), (artstation:0.9), (illustration:0.8), (countershading:0.8), (cinematic lighting:0.8), (8K Ultra HD:0.8), (anatomically correct:1.0), pony, portrait, detailed background

Изображение головы случайной пони:
Набросок для ControlNet сделанный в inkscape
Результат:
949KB Раз голова
932KB Два голова
1.03MB Три голова
998KB Четыре голова

Попытался отобразить сразу две головы пони на одном изображении. Был использован тот же набросок с головой и его отраженная по горизонтали копия, размещенные на левой и правой стороне изображения с помощью Latent Composite. Ну и два токена «pony» и «portrait» в промте были заменены на один «two ponies».
537KB Раз
534KB И два

Изображение пони в полный рост:
Позитивные промт тот же самый, только токен «portrait» заменен на «full body».
Набросок для ControlNet сделанный в inkscape
Результат:
1.04MB Пони раз
0.99MB Пони два
997KB Пони три
1.04MB Пони четыре
989KB Пони пять

798KB Ну и еще скормил контролнету свою аватаркуНо только пришлось снизить силу до 0.4 и пропустить через препроцессор.




Ну и немного изображений, полученных в stable-diffusion-webui когда я подбирал токены в поисках устраивающей меня стилистики.

383KB Голова рандомной пони №1
322KB Голова рандомной пони №2
410KB Голова рандомной пони №3
377KB Голова рандомной пони №4
370KB Голова рандомного пони №5
337KB Голова Твайлайт
378KB Голова Пинки Пай
350KB Голова Эпплджек
403KB Голова Рэйнбоу Дэш
364KB Голова Рэрити
349KB Голова Флаттершай
1.72MB Эксперимент по превращению Флаттершай в драконаpony fluttershy
[pony fluttershy:dragon:8]
[pony fluttershy:dragon:6]
[pony fluttershy:dragon:4]
[pony fluttershy:dragon:3]
[pony fluttershy:dragon:2]


И немного из ComfyUI
1.3MB Флаттершай
1.41MB Твайлайт
592KB Ну и еще Твайлайт
634KB Твайлайт под Darkest Dungeon style — LORADarkest Dungeon style — LORA
strength_model: 0.86
strength_clip: 0.86

404KB Твайлайт под Minimalist Anime StyleMinimalist Anime Style
strength_model: 1
strength_clip: 1

521KB Твайлайт под Figma Anime FiguresFigma Anime Figures
strength_model: 0.9
strength_clip: 0.9

467KB Твайлайт под Don't Starve styleDon't Starve style
strength_model: 0.5
strength_clip: 0.5


Табун не затирает метаданные в загружаемых на него png файлах, так что, во всех загруженных на этот сайт сгенерированных изображениях должна присутствовать вся информация для повторной генерации. Но стоит учесть, что даже при тех же вводных на разном железе результат может немного отличаться. А еще метаданные из сгенерированного изображения в stable-diffusion-webui не могут быть импортированы в ComfyUI, и наоборот.

13 комментариев

Годно.
Наконец то вижу не просто промпты, а попытку использования нейросеток «по прямому назначению» — для доработки чего то (пусть и на простейшем уровне).
Это всё чисто локальная sd?
oxide
+4
Ага, локальная.
Maxwell
+1
Эту ставил, но пока особо не крутил осторожно — она 40 гб почти выкачивает, 15 сразу остальное при первом запуске
oxide
+1
Ммм. Ну ComfyUI и sd-webui примерно столько же у меня и весят со всеми моделями, лорами и моделями для контролнета и прочим.
Maxwell
0
Ну и еще скормил контролнету свою аватарку

Таки понифицировала.
TheScriptComp
+2
Очень даже хорошие работы получились.
Voinfed
+2
Классные арты нейросеть сгенерировала! Я сохранила Твайлайт на улице города, голову рандомной пони №1, голову рандомной пони №4, голову Твайлайт, голову Рэйнбоу Дэш, Твайлайт, Твайлайт под Minimalist Anime Style (Твайки у нейросети слишком классные). Но жаль художников, они, наверное, скоро без работы останутся…
EleonoraBlack
+2
— Уже…
DxD2
0
Пока до нормального продакшен-уровня выхлоп нейронки всё равно приходится доводить руками, так что ещё не уже)
makise_homura
0
Красота какая! Дух захватывает
Lesnik
+5
Норм подбор, рил гут. Сяб)
Darkseer
+4
DxD2
+1
Твайлайт на улице города
О, а хорошо получилось. И нейронка даже в более-менее различимые буквы смогла.
Просто рандомная пони в полный рост
Вот он, резщультат рэритвай-шиппинга!
Флаттершай где-то среди руин
Что-то у неё с ногами не то...
Рэрити
Когда нейронка не поняла, то ли она хочет нарисовать галстук, то ли лифчик =)
Два голова
Прям на якутскую поню похоже =)
Раз
Левый чёт как гопник докапывается.
Пони четыре
Ммм, интересные у неё накопытники получились.
Эксперимент по превращению Флаттершай в дракона
А интересный эксперимент. Не в ту пони влюбился Спайк, явно =)
Ну и еще Твайлайт
Как-то она прямо осуждающе в душу смотрит)
Твайлайт под Figma Anime Figures
А и правда на фигурку смахивает…
makise_homura
+1
Только зарегистрированные и авторизованные пользователи могут оставлять комментарии.