- Каква е целта на стабилното дифузионно рисуване?
- Как работи Stable Diffusion inpainting?
- Как да използваме стабилно дифузионно рисуване?
Каква е целта на стабилното дифузионно рисуване?
Целта на стабилното дифузионно рисуване е да генерира визуално правдоподобно и кохерентно съдържание в липсващите области на изображението, като същевременно запазва цялостната структура и външния вид на оригиналното изображение. Той постига това чрез използване на концепцията за разпространение на изображението, което е процес на разпространение на информация или цвят от познати области към непознати области.
Как работи стабилното дифузионно рисуване?
Процесът на рисуване обикновено включва две основни стъпки: разпространение и дифузия. Известните региони около липсващата област се анализират в етапа на разпространение, за да се оцени липсващата информация. Тази оценка може да се основава на различни методи, като синтез на текстура, съпоставяне на кръпки или разпространение на ръбове.
След като липсващата информация бъде оценена, се извършва стъпката на разпространение. Дифузията включва постепенното разпространение на информация за цвета и текстурата от познатите региони към непознатите региони. Процесът на дифузия има за цел да създаде плавен преход между нарисуваните области и оригиналното съдържание, като гарантира, че генерираното изображение остава визуално последователно.
Как да използваме стабилно дифузионно рисуване?
Inpainting е функция, която ви позволява да редактирате съществуващи изображения с текстови подкани с помощта на маска. Маската е черно-бяло изображение, което показва кои части от изображението искате да регенерирате с AI модела. Можете да използвате inpainting, за да коригирате дефекти, да добавяте или премахвате обекти, да променяте цветове или стилове и т.н. Потребителите могат да го инсталират локално, като следват официалната връзка или могат да използват функционалностите му чрез уеб потребителския интерфейс.
Нека проучим практическото изпълнение, като следваме дадените стъпки:
Стъпка 1: Изберете раздела „txt2img“.
Изберете „ txt2img ” и въведете текстовата подкана в текстовото поле. Потребителите могат да използват всякакви думи или фрази, които желаят, но се уверете, че са описателни и достатъчно конкретни, за да ги разбере AI моделът. Потребителите могат също да използват модификатори като „:“, „+“, „-“, „(“, „)“ и т.н., за да прецизират подканата. Например, генерирайте изображение на „ котка с очила и шапка ”, както по-долу:
Стъпка 2: Изберете контролната точка на модела
Потребителите могат да изберат контролната точка на модела от падащото меню в горния ляв ъгъл. Контролната точка на модела определя стила и качеството на генериране на изображението. Има няколко налични контролно-пропускателни точки, като например „ model.ckpt ”, “ sd-v1-5-inpainting ”, “ sd-v1-5-256 ”, “ sd-v1-5-512 “, и др.:
Стъпка 3: Регулирайте размера на изображението
Регулирайте размера на изображението и други настройки според вашите предпочитания. Размерът на изображението изчислява разделителната способност на изходното изображение. Другите настройки включват сила на шумопотискане, мащаб на CFG, размер на партидата и т.н., които влияят върху скоростта и качеството на генериране на изображението:
Стъпка 4: Щракнете върху бутона „Генериране“.
Натиснете „ Генерирай ” за стартиране на процеса на генериране на изображението. В зависимост от подканата на потребителя, контролната точка на модела и настройките, генерирането на изображението може да отнеме няколко минути или повече:
Стъпка 5: Натиснете бутона „Изпрати към inpaint“.
След като изображението бъде генерирано, потребителите могат да го запазят или модифицират допълнително с помощта на inpainting:
Стъпка 6: Създайте маска
За да използвате inpainting, изберете „ img2img ” и изберете „ Inpaint ” подраздел. Използвайте инструмента четка за рисуване, за да създадете маска върху изображението. Черните области са мястото, където искате AI моделът да регенерира изображението въз основа на текстовата ви подкана, както е показано по-долу:
Забележка : Потребителите могат също да качат изображението в платното за рисуване, като щракнат върху „ Качване на Inpaint ” или като използвате съществуващото изображение.
Стъпка 7: Кликнете върху бутона „Генериране“.
Изберете и приложете същата контролна точка и настройки на модела, които сте използвали за генериране на оригиналното изображение, и щракнете върху „ Генерирай ” бутон:
Резултатът показва, че е приложена функцията за стабилно дифузно рисуване.
Предимства и употреба на стабилна дифузия
Стабилното дифузионно боядисване има няколко предимства пред другите методи за боядисване, като например:
- Може да управлява големи региони с липсващи пиксели и сложни текстури.
- Може да запази острите ръбове и фините детайли в изображението.
- Може да избегне артефакти като замъгляване, звънене или прекалено изглаждане.
- Може лесно да се реализира и паралелизира с помощта на стандартни числени методи.
Стабилното дифузионно боядисване може да се използва за различни приложения, като например:
- Възстановяване на изображението : поправяне на повредени или влошени изображения, като стари снимки, картини или документи.
- Редактиране на изображения : премахване на нежелани обекти или региони от изображения, като лога, водни знаци или петна.
- Завършване на изображението : попълване на липсващи области в изображенията, като оклузии, дупки или празнини.
Заключение
Stable Diffusion inpainting предлага мощно и удобно решение за възстановяване на липсващи или повредени области в изображения. Използвайки концепцията за дифузия на изображението, потребителите интегрират нарисувано съдържание с оригиналното изображение, осигурявайки визуална съгласуваност и минимизирайки артефактите. Със своя интуитивен GUI и регулируеми параметри, потребителите могат лесно да маркират областите за рисуване и да контролират процеса на рисуване. Тази статия обяснява основните стъпки и предимства на използването на стабилно дифузионно рисуване и някои от неговите приложения.