- Quin és el propòsit de la pintura de difusió estable?
- Com funciona la pintura de difusió estable?
- Com utilitzar la pintura de difusió estable?
Quin és el propòsit de la pintura de difusió estable?
L'objectiu de la pintura de difusió estable és generar contingut visualment plausible i coherent a les regions que falten d'una imatge alhora que es preserva l'estructura i l'aspecte generals de la imatge original. Ho aconsegueix aprofitant el concepte de difusió d'imatges, que és el procés de difusió d'informació o color des de zones conegudes a zones desconegudes.
Com funciona la pintura de difusió estable?
El procés de pintat normalment implica dos passos principals: propagació i difusió. Les regions conegudes que envolten l'àrea que falta s'analitzen en el pas de propagació per estimar la informació que falta. Aquesta estimació es pot basar en diversos mètodes, com ara la síntesi de textures, la concordança de pegats o la propagació de vores.
Un cop estimada la informació que falta, té lloc el pas de difusió. La difusió implica la propagació gradual de la informació de color i textura des de les regions conegudes a les regions desconegudes. El procés de difusió pretén crear una transició suau entre les regions pintades i el contingut original, assegurant que la imatge generada es mantingui visualment consistent.
Com utilitzar la pintura de difusió estable?
Inpainting és una característica que us permet editar imatges existents amb indicacions de text mitjançant una màscara. Una màscara és una imatge en blanc i negre que indica quines parts de la imatge voleu regenerar amb el model d'IA. Podeu utilitzar inpainting per corregir defectes, afegir o eliminar objectes, canviar colors o estils, etc. Els usuaris poden instal·lar-lo localment seguint l'enllaç oficial o poden utilitzar les seves funcionalitats a través de la interfície d'usuari web.
Explorem la implementació pràctica seguint els passos indicats:
Pas 1: seleccioneu la pestanya 'txt2img'.
Seleccioneu el ' txt2img ” i introduïu el missatge de text al quadre de text. Els usuaris poden utilitzar les paraules o frases que vulguin, però assegureu-vos que siguin prou descriptives i específiques perquè el model d'IA les entengui. Els usuaris també poden utilitzar modificadors com ':', '+', '-', '(', ')', etc. per ajustar el missatge. Per exemple, genereu una imatge de ' un gat amb ulleres i barret ' com a continuació:
Pas 2: seleccioneu el punt de control del model
Els usuaris poden triar el punt de control del model al desplegable de la cantonada superior esquerra. El punt de control del model determina l'estil i la qualitat de la generació d'imatges. Hi ha diversos punts de control disponibles, com ara ' model.ckpt ”, “ sd-v1-5-inpainting ”, “ sd-v1-5-256 ”, “ sd-v1-5-512 ', etc.:
Pas 3: ajusteu la mida de la imatge
Ajusteu la mida de la imatge i altres paràmetres segons les vostres preferències. La mida de la imatge calcula la resolució de la imatge de sortida. La resta de configuracions inclouen la força de reducció de soroll, l'escala CFG, la mida del lot, etc., que afecten la velocitat i la qualitat de la generació d'imatges:
Pas 4: feu clic al botó 'Genera'.
Premeu el ' Generar ” botó per iniciar el procés de generació de la imatge. Depenent de la indicació de l'usuari, el punt de control del model i la configuració, pot trigar uns minuts o més a generar la imatge:
Pas 5: premeu el botó 'Envia a inpaint'.
Un cop generada la imatge, els usuaris poden desar-la o modificar-la encara més mitjançant inpainting:
Pas 6: creeu una màscara
Per utilitzar inpainting, seleccioneu l'opció “ img2img ” i seleccioneu la pestanya “ Inpaint ” subpestanya. Utilitzeu l'instrument pinzell per crear una màscara a la imatge. Les zones negres són on voleu que el model d'IA regeneri la imatge en funció del vostre missatge de text com a continuació:
Nota : Els usuaris també poden pujar la imatge al llenç d'inpainting fent clic a ' Càrrega Inpaint ” o utilitzant la imatge existent.
Pas 7: Feu clic al botó 'Genera'.
Seleccioneu i apliqueu el mateix punt de control del model i la configuració que vau utilitzar per generar la imatge original i feu clic a ' Generar botó ”:
La sortida mostra que s'ha aplicat la funció de pintura de difusió estable.
Avantatges i ús de la difusió estable
La pintura de difusió estable té diversos avantatges sobre altres mètodes de pintura, com ara:
- Pot gestionar grans regions de píxels que falten i textures complexes.
- Pot conservar vores nítides i detalls fins a la imatge.
- Pot evitar artefactes com ara desenfocament, timbre o suavització excessiva.
- Es pot implementar i paral·lelitzar fàcilment mitjançant mètodes numèrics estàndard.
Stable Diffusion Inpainting es pot utilitzar per a diferents aplicacions, com ara:
- Restauració d'imatges : reparació d'imatges danyades o degradades, com ara fotos, pintures o documents antigues.
- Edició d'imatges : eliminació d'objectes o regions no desitjats de les imatges, com ara logotips, marques d'aigua o taques.
- Finalització de la imatge : omplint les regions que falten a les imatges, com ara oclusions, forats o buits.
Conclusió
Stable Diffusion inpainting ofereix una solució potent i fàcil d'utilitzar per restaurar les regions desaparegudes o danyades a les imatges. Mitjançant l'ús del concepte de difusió d'imatges, els usuaris integren el contingut pintat amb la imatge original, assegurant la coherència visual i minimitzant els artefactes. Amb la seva GUI intuïtiva i els paràmetres ajustables, els usuaris poden marcar fàcilment les regions d'inpainting i controlar el procés d'inpainting. Aquest article ha explicat els principals passos i avantatges d'utilitzar la pintura de difusió estable i algunes de les seves aplicacions.