Обработал свои арты нейросетью

Не смотря на то что проверял я с огромной кучей (во всех смыслах слова) всё таки адекватными получились немногие, так что дабы не мучать огромнйо кучей всех возможных, я оставлю ещё самые адекватные и успешные и только среди safe вариаций


Дёрпи ест пиццу или что она тут делает хз
Санбёрст сменил пол?
А Скуталу метку
Криз походу переполняет любовь
Из пони в человека
Походу магия по превращению в себя
Куда собрался!?
Чисто русский Макинтош
Шмот лучше брони
Копыто в камне
Очень прикольный стиль
Меткоискатели на основе недавнего арта
Милота
Челопонь какой-то
Кирин
Маффин
Жмыхануло
Плотик
Яблоки во всех местах
Что-то мне этот стиль напоминает
Ми-Ми-Ми
Бонус Хумки

22 комментария

Заметно, что многие изображение вытянуты по вертикали или наоборот сплюснуты. Чтобы такого не было, нейронке нужно либо скармливать квадратные изображения, либо настраивать aspect rate самой сетки (но не все модели это позволяют), либо включить режим работы, при котором нейронка масштабирует исходник с сохранением aspect rate (во фреймворке от AUTOMATIC1111 установить галочку «resize and fill»).
Челопонь какой-то
Поскольку сетка может генерировать как обычных пони, так и антро, часто происходит такая путаница. Чтобы её не происходило, нужно добавлять в запрос ключевики «pony» и «feral», либо же в negative prompt добавить ключевик «anthro»
Примерно так
Вообще, вопреки расхожему мнению «ничего думать не надо, нажал кнопку и получил 100500 картинок», работе с нейронками тоже надо учиться, как и рисованию. Преимущество нейронок лишь в том, что обучиться создавать с их помощью картинки можно намного быстрее — они не требуют жопочасов на постановку руки и подобных же многомесячных упражнений.

Дёрпи ест пиццу или что она тут делает хз
Она с нею обжимается

Криз походу переполняет любовь
Да, вон какие бёдра отъела

Куда собрался!?
Спайки, а хочешь увидеть мой настоящий облик?
Ну как, передумал уходить?
Lyx Изменён автором
+1
1. Сетка понимает героев 5 поколения как людей при генерации, но при основе для редактуры делает нормально
2. Вот я кстати не знаю как её обучать и там для этого есть спец модель дополнительная
3. Напомнило стиль WhiteDiamondsLTD
JackyBreeze
0
Существует три способа обучения. Самый простой — Textual Inversion, нужно порядка 20 размеченных и качественно тегированных картинок и 8 Гб VRAM. Для того, чтоб сетка запомнила персонажей G5, этого уже вполне достаточно. Я так дообучил нейронку для
генерации изображений Гильды
поскольку по умолчанию понячья сетка грифонов «не знает».
Также есть Hypernetwork (возможностей больше, но и весит больше, обучать весьма сложно) и наиболее популярная штука — Dreambooth. Он требует не менее 10 Гб VRAM для обучения, несколько сотен (минимум) изображений, создаёт большие модели, но даёт очень хорошие результаты.
Гайды и обсуждения всех этих методов есть в сети.
Lyx
+1
А где оригиналы, чтоб можно было оценить эффект от применения сеткой?
ShprotaNa
+1
вот все под одной

Правда кое какие я не помню на чём основаны
JackyBreeze Изменён автором
+1
Рисунки и так весьма качественные, так что не вполне понятно, в чём смысл обработки нейронкой.
Добавить светотень?Сделать полный редизайн персонажа?
Lyx
+1
Какую модель используешь?
JackyBreeze
+1
Понячью. Pony diffusion V1 (хэш 9070b574) с прикрученным к ней VAE от Stable Diffusion 1.5 (даёт очень хорошие результаты при перерисовке).
Сам ckpt-файл понячьей модели есть на Меге.
VAE от SD1.5 берётся например здесь. Я использую фреймворк от AUTOMATIC1111, чтоб он его увидел, нужно положить его в ту же папку models, в которой лежит понячья модель, и переименовать так, чтобы имя совпадало с именем модели, а расширение было .vae.pt (именно pt, а не ckpt!). Как-то так:
pony.ckpt — сама модель
pony.vae.pt — этот самый VAE.
Если всё сделано правильно, то при загрузке модели в консоли будет надпись «Loading VAE weights from ...»
Lyx
+2
Я использую модель cookies и pony_furry. Для них этот vae подойдёт? Тем более эта версия explicit контент не делает
JackyBreeze
0
Для pony_furry (хэш 5bdc40aa) подойдёт, а в pony cookies A12 (хэш 2ce7dcf5) встроен собственный VAE.
Lyx
0
На нём делаю, но как то при этом хреново выходит. Может режим поменять или размеры или ещё что?
JackyBreeze
0
Cookies A12 не очень хороша для перерисовки, к тому же «не понимает» стандартные запросы — там специальный синтаксис и список тегов. Она вообще для сборки ОС'ок предназначена главным образом.
У pony_furry хэш 5bdc40aa? А то может другая версия…
Попробуйте всё же загрузить Pony Diffusion V1. Ну или на уже загруженной pony_furry при перерисовке той же Темпест попробуйте настройки:

— установить на Resize and fill
— размеры: 512x512 (если нужны другие разрешения, в них можно отрендерить позже)
— Denoising strength: 0.69
— CFG scale: 12
— Sampler: Euler A
— Steps: 50
— Запрос:
tempest shadow, solo, pony, cyber suit, sharp focus, 8k, adorasexy, pinup, by Russolo Rossdraws Kinkade, soft light, volumetric lighting, intricate, elegant, highly detailed, beautiful picture
— Negative prompt:
anthro, badly drawn, (sfm:0.8)

Если всё получится, значит модель тащит и нужно просто учиться с нею работать.
Lyx Изменён автором
0
Да, именно такая. Хоть и не предназначена, но неплохо справляется, только вот как мне своего оса ей сгенерить не знаю.
Между этими двумя разницы не вижу особо, кроме разве что того, что некоторых персов определяет неправильно, например Спайка, а героев г5 вообще не знает.
А первая версия чем лучше?
Обычно я на 30 шагах делаю, да и получается 50 это в целом или с учётом дополнительных?
JackyBreeze Изменён автором
0
Первая версия лучше всего работает со стилями. Вот то, что я показал в теме про Селестию, можно сделать только с ней — больше никак вы это не повторите.
Cookies A12 стилизовать не умеет вовсе. Мало того, она требует использования специального синтаксиса запросов. Вот я с её помощью на пробу перерисовал Темпест
Параметры:
Prompt: very high quality, safe, Tempest Shadow, simple background, realistic, vault suit, side view, broken horn, cyber suit, artist dstears, volumetric lighting, irl, soft light, detailed, glowing
Negative prompt: very low quality
Steps: 50, Sampler: Euler a, CFG scale: 12, Seed: 2370496424, Size: 512x512, Model hash: 2ce7dcf5,
Denoising strength: 0.5
но это было непросто. И это максимум того, что из Cookies A12 можно выжать — никакой работы с объёмным светом сюда не засунуть. Предполагается, что в A12 вы просто собираете персонажа из ключевиков, чтобы потом доработать в какой-то другой модели.
только вот как мне своего оса ей сгенерить не знаю.
В комплекте с A12 должен идти файл cheatsheet.txt — в нём подробно описан синтаксис. Кроме него к модели также прилагаются справочные данные: tag_frequency.txt и artists.txt — после знакомства с синтаксисом вам они понадобятся.
50 это в целом или с учётом дополнительных?
Каких дополнительных? Общее число шагов для сэмплера скриншот настроек
Pony Diffusion V1 — наиболее оптимальная модель именно для пони (без грифонов, драконов и прочих фуррей), к тому же она очень дружелюбна к новичкам, так что с неё очень удобно начинать. Если вы даже из неё не можете извлечь приличного изображения, то с остальными будет ещё хуже.
Lyx Изменён автором
0
В первой explicit нет, хотя странно, в более новой должно быть, а та что пони и фурри по сути как третья версия в которой и фурри добавлены.

А где эти файлы? И можно ли ОСа сделать как-то в 3 версии модели с фурри и пони?

50 не будет, только 36, там вроде шумоподавление или типа того. А если с нуля, то обязательно 50? При 36 делаю и выходит очень детально.

У меня по сути третья версия, она даже лучше, так как в ней куча других существ можно, только вот при этом Галлуса они не понимает и Спайка тоже не совсем как надо
JackyBreeze
0
ого
ShprotaNa
0
Ох ты ж! Такое ощущение, будто фокусник на моих глазах вытащил кролика из шляпы. Чудеса
DMW
0
Это чудеса в стиле «как нарисовать сову»: показывается исходный набросок и конечный результат, а промежуточная работа по составлению правильного запроса не видна.
Один из промежуточных рисунков
Равно как не виден и ещё десяток «мусорных» изображений, которые были отброшены как неудачные в процессе подготовки рисунка.
Но в любом случае производительность оператора нейронки значительно выше, чем у художника. А уж профессиональный художник, умеющий ещё и в нейронки, вообще вне конкуренции. Думаю, лет через пять использование нейросетей при рисовании станет такой же обыденностью, как использование графических редакторов.
Lyx
0
Кнопка «сделать все хорошо» реально начала работать?
Ponywka
0
Да. Только перед тем, как вы сможете её нажать, вам придётся правильно, лаконично и предельно конкретно сформулировать запрос. А поскольку очень многие люди даже и живому-то художнику толком не могут объяснить, чего вообще от него хотят, то их «общение» с нейронкой и вовсе не задаётся.
Lyx
+1
Так?
oxide
+1
Лол, выглядит весьма cursed, я бы сказал =)
Ну что ж, зато хороший пример того, что нейронка способна выдавать не только шедевры (какое впечатление складывается по постам в ЯНДХ), а на один шедевр приходится десяток (а то и сотня) такого себе.
makise_homura
0
Только зарегистрированные и авторизованные пользователи могут оставлять комментарии.
Скрыто Показать