Практическое применение нейросетей / нейромазня :: Stable diffusion :: длиннопост :: гайд :: ControlNet :: нейронные сети

Stable diffusion нейронные сети нейромазня ControlNet гайд длиннопост 

Практическое применение нейросетей

Раз уж я вошёл в мир нейросетей благодаря реактору (через слитую модель novelAi и гайду к ней), то хочу вернуть дань благодарности этим небольшим мануалом.

Вы сможете генерировать прикольные арты на основе любого логотипа \ текста буквально в пару шагов.

0) Нужен stable diffusion от automatic1111 свежей версии (как его устанавливать тут не буду описывать);

1) Устанавливаем расширение ControlNet:

a) Копируем ссылку: https://github.com/Mikubill/sd-webui-controlnet

b) Идём во вкладку extensions -> install from URL, в первое поле вставляем ссылку и жмакаем install

txt2img img2img Extras PNG Info Checkpoint Merger Train OpenPose Editor Depth Library Settings l Extensions
Installed Available Install from URL — URL for extension's git repository
https://github.com/Mikubill/sd-webui-controlnetl Local directory name
Leave empty for auto
Install,Stable

c) Во вкладке installed на всякий случай проверяем апдейты: "Check for updates", и нажимаем "Apply and restart UI"

txt2img img2img Extras PNG Info Checkpoint Merger Train OpenPose Editor Depth Library Settings
Extensions
l Installed Available Install from URL
Apply and restart Ul
Check for updates
Extension	URL	Version	Update
@ openpose-editor	https://github.com/fkunnl326/openpose-editor	124e47c5 (Sun

После этих манипуляций у Вас перезагрузится web страница и появится вкладка "ControlNet" в txt2img:

txt2img
img2img Extras PNG Info Checkpoint Merger Train OpenPose Editor Depth Library Setti
bomberman
blur, low quality, bad art, man, face, skull, text
Sampling method	Sampling steps			20
Euler a v v J				
Width	768		Batch count	4
		ti		
Height	768	\	/	Batch size	1
CFG Scale				
Seed -1

(Если не появилась, то попробуйте Settings, нажать Apply и перезапустить Stable Diffusion полностью)

d) Загружаем модели для ControlNet:

для этого идём сюда: https://civitai.com/models/9251/controlnet-pre-trained-models

скачиваем все версии моделей (там есть раздел Versions с отдельной кнопкой загрузки);

все скачанные файлы закидываем в <путь до SD>\stable-diffusion-webui\extensions\sd-webui-controlnet\models

2) Генерируем арты:

a) подготавливаем свой логотип \ текст. 

я сделал такую картинку в фш:

Stable diffusion,нейронные сети,нейромазня,ControlNet,гайд,длиннопост

p.s: походу желательно не использовать прозрачный фон (у меня с ним ничего не вышло).

b) двигаем настройки ControlNet:

ControlNet
Invert colors if your image has white background.
Change your brush width to make it thinner if you want to draw something.
2. Нажимаем "Enable"; Invert Color (если фон белый); Low VRAM
@ Enable	@ Invert Input Color	RGBtoBGR	@ Low VRAM	Guess Mode
Preprocessor 3- p ^processor:

c) и наконец генерируем (выставляем размер, пишем promptы, жмакаем generate).

единственное НО: у меня не получилось подружить controlNet с "hiresfix". даже "latent(nearest)" начинает ломать образ. поэтому генерировал сразу в 768х768 (Вам, возможно, надо будет пробовать с 512х512)

Stable Diffusion Checkpoint ---------------------
dreamlikeDiffusionl0_10.ckpt [0aecbcfa2c] ^
SDVAE
G Automatic
G
Clip skip
r
2
Show live previews of the created image
txt2img img2img Extras PNG Info Checkpoint Merger Train OpenPose Editor Depth Library Settings Extensions
2/75

любые LORA, HyperNetwork, embeddings прекрасно работают.

модель на которой я генерил: https://civitai.com/models/1274/dreamlike-diffusion-10

ну и примеры того что у меня получилось:

Stable diffusion,нейронные сети,нейромазня,ControlNet,гайд,длиннопост

Stable diffusion,нейронные сети,нейромазня,ControlNet,гайд,длиннопост

Stable diffusion,нейронные сети,нейромазня,ControlNet,гайд,длиннопост

Stable diffusion,нейронные сети,нейромазня,ControlNet,гайд,длиннопост

Stable diffusion,нейронные сети,нейромазня,ControlNet,гайд,длиннопост

Stable diffusion,нейронные сети,нейромазня,ControlNet,гайд,длиннопост

Stable diffusion,нейронные сети,нейромазня,ControlNet,гайд,длиннопост

Stable diffusion,нейронные сети,нейромазня,ControlNet,гайд,длиннопост

Stable diffusion,нейронные сети,нейромазня,ControlNet,гайд,длиннопост

Stable diffusion,нейронные сети,нейромазня,ControlNet,гайд,длиннопост

Stable diffusion,нейронные сети,нейромазня,ControlNet,гайд,длиннопост

Идея честно спизженна отсюда:

https://www.reddit.com/r/StableDiffusion/comments/11ku886/controlnet_unlimited_album_covers_graphic_design/

Ну и напоследок хочу сказать что это расширение умеет гораздо большее. например можно полностью копировать стиль фото \ любые позы \ выражения лиц и ДАЖЕ рисовать идеальные руки и ноги (причём с фокусом на них). Но и запариться там нужно чуть сильнее)


Подробнее
txt2img img2img Extras PNG Info Checkpoint Merger Train OpenPose Editor Depth Library Settings l Extensions Installed Available Install from URL — URL for extension's git repository https://github.com/Mikubill/sd-webui-controlnetl Local directory name Leave empty for auto Install
txt2img img2img Extras PNG Info Checkpoint Merger Train OpenPose Editor Depth Library Settings Extensions l Installed Available Install from URL Apply and restart Ul Check for updates Extension URL Version Update @ openpose-editor https://github.com/fkunnl326/openpose-editor 124e47c5 (Sun Mar 5 22:55:09 2023) unknown @ posex https://github.com/hnmr293/posex.git 51b78cff (Sun Mar 5 04:33:58 2023) unknown @ sd-webui-controlnet https://github.com/Mikubill/sd-webui-controlnet d41c470e (Mon Mar 6 11:12:23 2023) unknown @ sd-webui-depth-lib https://github.com/jexom/sd-webui-depth-lib 04ac5c4d (Mon Mar 6 06:23:012023) unknown @ Lora built-in @ SwinIR built-in
txt2img img2img Extras PNG Info Checkpoint Merger Train OpenPose Editor Depth Library Setti bomberman blur, low quality, bad art, man, face, skull, text Sampling method Sampling steps 20 Euler a v v J Width 768 Batch count 4 ti Height 768 \ / Batch size 1 CFG Scale Seed -1 Restore faces Tiling Hires, fix Posex ◄ ControlNet ◄ OClipi None V/ *'0 Extra

ControlNet Invert colors if your image has white background. Change your brush width to make it thinner if you want to draw something. 2. Нажимаем "Enable"; Invert Color (если фон белый); Low VRAM @ Enable @ Invert Input Color RGBtoBGR @ Low VRAM Guess Mode Preprocessor 3- p ^processor: scribble; Model: sc ible Model scribble v controlnetPreTrained_scribbleV10 [c508311e] ^ 4. J Weight i Guidance Start (T) 0 Guidance End (T) Annotator resolution 512 Threshold A 64 Threshold В 64 Resize Mode Envelope (Outer Fit) 0 Scale to Fit (Inner Fit) Just Resize 4. Выставляем размеры картинки Canvas Width 758 ti 768 Canvas Height
Stable Diffusion Checkpoint --------------------- dreamlikeDiffusionl0_10.ckpt [0aecbcfa2c] ^ SDVAE G Automatic G Clip skip r 2 Show live previews of the created image txt2img img2img Extras PNG Info Checkpoint Merger Train OpenPose Editor Depth Library Settings Extensions 2/75 bomberman Generate 0/75 w i* a blur, low quality, bad art, man, face, skull, text Styles G Sampling method Euler a Width Height Sampling steps 768 tt 768 20 Batch count I Batch size CFG Scale Seed -1 Extra Restore faces Tiling Hires, fix Posex ControlNet Control Model - 0 Control Model -1 Control Model-2 0 Image ◄ T o x bomberman Negative prompt: blur, low quality, bad art, man, face, skull, text











Stable diffusion,нейронные сети,нейромазня,ControlNet,гайд,длиннопост
Еще на тему
Развернуть
Нихера себе.
Мне страшно думать о том, что будет дальше :с
Возможно у нас будет новый лого)
Shichi13 Shichi13 09.03.202309:31 ответить ссылка 19.7
Неужели проведут конкурс сгенерированных лого? И назвать как-нибудь "50 оттенков реактора"
следующий ивент будет носить название "пятьдесят оттенков сплита"
Заставят нейросети писать о нем похабные стихи что ли?
СЛОВНО...
Утром работа, вечером ужин и сон, все как обычно в общем то.
Верно, ураносодержащие руды сами себя не добудут.
Ssipak Ssipak 09.03.202315:07 ответить ссылка 2.0
Мне тоже. Прогресс в создании пикчи из текста за полтора года:
Mind's I Mind's I 09.03.202315:52 ответить ссылка 11.4
Странный человек, генерит какие то значки вместо голых баб.
g7127882 g7127882 09.03.202314:38 ответить ссылка 9.4
upd: сегодня выпустили ControlNet для SD2.1 (аниме модели это 1.5)

думаю на ней результат будет в разы качественнее:
во первых потому что SD2.1 заточен под картинки 768х768, а во вторых потому что эта модель гораздо лучше делает мелкие детали.
в общем на днях попробую.

ссылки, если кому интересно:
ControlNet: https://huggingface.co/thibaud/controlnet-sd21
Свежая модель для SD2.1: https://civitai.com/models/17277
myadib myadib 09.03.202315:05 ответить ссылка 0.1
myadib myadib 09.03.202315:46 ответить ссылка 3.4
Она вроде бы письки не делает.
pumki pumki 09.03.202316:47 ответить ссылка 0.0
ну.. если Вам был нужен логотип из писек, то увы)
myadib myadib 09.03.202316:51 ответить ссылка 0.8
Привет.
Сделал пост который имеет похожую тематику с твоим постом...
Если хочешь приходи в гости.
сюда: /post/5715080

коммент возможно для тебя: /post/5715080#comment28814604

~~~~
С Зимнем Солнце Стоянием тебя!
IONE IONE 22.12.202306:41 ответить ссылка 0.6
+ закладка
b.o.g b.o.g 09.03.202315:16 ответить ссылка 0.0
ChatGPT мне уже описания товаров сделал, значит пора єтой нейронкой обновить лого.
Мне что интересно, почему все нейросетевые изображения такие странные? То бишь они выглядят как-то слишком не по человечески, и вызывают у меня странное беспокойство
DeadTR DeadTR 09.03.202316:28 ответить ссылка 0.6
Кажется ты просто выебываешься. Если бы чувак просто их запостил и сказал что сам нарисовал, ты бы первый ему лайки побежал ставить.
Не-не, я без претензий. Вообще считаю это крутой технологией. Но всё равно часто вижу нейронные "мазки", которые выглядят не человечески, чем вызывают отталкивание.
По сему и спросил, нет ли ещё у кого подобного
DeadTR DeadTR 09.03.202317:25 ответить ссылка 0.3
У меня такое же впечатление и я даже знаю, откуда оно взялось. Раньше я практиковал осознанные сны (типа, когда постепенно учишься управлять снами) и вот эти картинки один в один похожи на бессмысленную фигню из снов. А что общее? Общее то, что мозг во сне отключает мощности и "рисует" на минималках.
У меня порой такое чувство возникает, мне кажется это похоже на эффект зловещей долины. То есть вроде похоже, что это мог человек нарисовать, но не совсем и это отталкивает.
> у меня не получилось подружить controlNet с "hiresfix"
Попробуй Lanczos, через него по моему мнению не ломает и силу на в hiresfix 0,45
Sampling method DPM++2M Karras
^ Hires, fix r€ Hires steps
Resize width t
Lanczos
Nearest ESRGAN_4x R-ESRGAN 4x+ R-ESRGAN 4x+ Anime6B LDSR
SwinlR_4x
xnracaie
Restore faces	Tiling
Upscaler
------------------s.
Latent
Latent
Latent (antialiased)
Latent (bicubic)
Latent (bicubic
так нормально работает, спасибо)
myadib myadib 10.03.202306:10 ответить ссылка 0.9
egegey egegey 09.03.202318:43 ответить ссылка 4.3
automatic1111 свежей версии (как его устанавливать тут не буду описывать);

даблять!

Я на хую вертел такие гитхабосвкие инструкции по установке
Install Python 3.10.6, checking "Add Python to PATH"
Install git.
Download the stable-diffusion-webui repository, for example by running git clone https://github.com/AUTOMATIC1111/stable-diffusion-webui.git.
Run webui-user.bat from Windows Explorer as normal, non-administrator, user.
А ГДЕ ЭТОТ ЕБУЧИЙ БАТНИК ДОЛЖЕН ПОЯВИТЬСЯ?!
ебите минусами как хотите, но ответ дайте хоть
В корне папки stable-diffusion-webui которую ты скачал гитом, например
Вот оно на гите - https://github.com/AUTOMATIC1111/stable-diffusion-webui/blob/master/webui-user.bat
$ git clone https://github.com/AUTOMATIC1111/stable-diffusion-webui.git
Cloning into 'stable-diffusion-webui'...
remote: Enumerating objects: 16434, done.
remote: Total 16434 (delta 0), reused 0 (delta 0), pack-reused 16434
.63 MiB/s
Receiving objects: 100% (16434/16434), 27.49 MiB | 2.34 MiB/s, done.
Resolving deltas: 100% (11490/11490), done.

Больше в командной строке ничего не выходит, и намёка на директорию тут не вижу
может быть это из-за того, что питон новее требуемого?
Нет, командная строка работает из какой то директории, если это командная строка windows, попробуй ввести "cd" и увидишь куда оно эту папку сохранило (если ничего не вводил, скорее всего в мои документы)
Если у тебя не командная строка windows, а bash (судя по $ перед git clone - так и есть), то введи echo "$PWD", тут то же самое
Вот например:
$ echo "$PWD"
/c/Users/Lemandog
блин, в подключении к удаленному серверу по ssh че-то такое было

благодарю, целую (с лёгким сексуальным подтесктом), люблю
и да, сам батник уже ругается на слишком новый питон =)
будем разбираться...
Есть умные люди которые все сделали, автоматическая установка всего, что нужно через exe.
спасибо! весь день залипаю
Спасибо большое за то, что скинул видео!
Только зарегистрированные и активированные пользователи могут добавлять комментарии.
Похожие темы

Похожие посты
stable-diffusion-webui X + <- ^ G Щ @ Создать ' LO ГО ® Й 0 I'l' Сортировать v = П| i f > 4 6 I A Имя Дата изменения Тип •git 29.03.2024 22:37 Папка с файлами .github 29.03.2024 22:37 Папка с файлами _pycache_ 29.03.2024 22:56 Папка с файлами config_states 29.03.2024 22:56 Папка с файл
подробнее»

Stable diffusion нейронные сети гайд ControlNet automatic1111

stable-diffusion-webui X + <- ^ G Щ @ Создать ' LO ГО ® Й 0 I'l' Сортировать v = П| i f > 4 6 I A Имя Дата изменения Тип •git 29.03.2024 22:37 Папка с файлами .github 29.03.2024 22:37 Папка с файлами _pycache_ 29.03.2024 22:56 Папка с файлами config_states 29.03.2024 22:56 Папка с файл