- Jaký je účel stabilního difúzního malování?
- Jak funguje stabilní difúzní malba?
- Jak používat stabilní difúzní malování?
Jaký je účel stabilního difúzního malování?
Cílem stabilního difúzního malování je vytvořit vizuálně věrohodný a koherentní obsah v chybějících oblastech obrazu při zachování celkové struktury a vzhledu původního obrazu. Dosahuje toho využitím konceptu difúze obrazu, což je proces šíření informací nebo barev ze známých oblastí do neznámých oblastí.
Jak funguje stabilní difúzní malba?
Proces malování obvykle zahrnuje dva hlavní kroky: šíření a šíření. Známé oblasti obklopující chybějící oblast jsou analyzovány v kroku šíření, aby se odhadla chybějící informace. Tento odhad může být založen na různých metodách, jako je syntéza textur, párování patchů nebo šíření hran.
Jakmile jsou chybějící informace odhadnuty, proběhne krok difúze. Difúze zahrnuje postupné šíření informací o barvě a struktuře ze známých oblastí do neznámých oblastí. Proces difúze má za cíl vytvořit hladký přechod mezi namalovanými oblastmi a původním obsahem, čímž se zajistí, že vygenerovaný obraz zůstane vizuálně konzistentní.
Jak používat stabilní difúzní malování?
Inpainting je funkce, která umožňuje upravovat existující obrázky s textovými výzvami pomocí masky. Maska je černobílý obrázek, který označuje, které části obrázku chcete regenerovat pomocí modelu AI. Pomocí inpaintingu můžete opravovat defekty, přidávat nebo odebírat objekty, měnit barvy nebo styly atd. Uživatelé si jej mohou nainstalovat lokálně kliknutím na oficiální odkaz nebo mohou využívat jeho funkce prostřednictvím webového uživatelského rozhraní.
Podívejme se na praktickou implementaci pomocí následujících kroků:
Krok 1: Vyberte kartu „txt2img“.
Vybrat ' txt2img ” a do textového pole zadejte textovou výzvu. Uživatelé mohou používat jakákoli slova nebo fráze, které chtějí, ale ujistěte se, že jsou dostatečně popisné a konkrétní, aby jim model AI porozuměl. Uživatelé mohou také použít modifikátory jako „:“, „+“, „-“, „(“, „)“ atd. k doladění výzvy. Vygenerujte například obrázek „ kočka nosí brýle a klobouk ' jak je uvedeno níže:
Krok 2: Vyberte kontrolní bod modelu
Uživatelé si mohou vybrat kontrolní bod modelu z rozevíracího seznamu v levém horním rohu. Kontrolní bod modelu určuje styl a kvalitu generování obrázku. K dispozici je několik kontrolních bodů, např. model.ckpt “, “ sd-v1-5-malba “, “ sd-v1-5-256 “, “ sd-v1-5-512 ', atd.:
Krok 3: Upravte velikost obrázku
Upravte velikost obrazu a další nastavení podle svých preferencí. Velikost obrázku vypočítá rozlišení výstupního obrázku. Mezi další nastavení patří síla potlačení šumu, měřítko CFG, velikost dávky atd., která ovlivňují rychlost a kvalitu generování obrazu:
Krok 4: Klikněte na tlačítko „Generovat“.
Klepněte na „ generovat ” pro spuštění procesu generování obrázku. V závislosti na výzvě uživatele, kontrolním bodu modelu a nastavení může vygenerování obrázku trvat několik minut nebo déle:
Krok 5: Stiskněte tlačítko „Odeslat do inpaintu“.
Jakmile je obrázek vygenerován, uživatelé jej mohou uložit nebo dále upravit pomocí inpaintingu:
Krok 6: Vytvořte masku
Chcete-li použít malování, vyberte „ img2img “ a vyberte „ Inpaint “podzáložka. K vytvoření masky na obrázku použijte nástroj štětec. Černé oblasti jsou místa, kde chcete, aby model AI regeneroval obrázek na základě vaší textové výzvy, jak je uvedeno níže:
Poznámka : Uživatelé mohou také nahrát obrázek na malířské plátno kliknutím na „ Nahrání Inpaintu ” nebo pomocí existujícího obrázku.
Krok 7: Klikněte na tlačítko „Generovat“.
Vyberte a použijte stejný kontrolní bod a nastavení modelu, jaké jste použili pro generování původního obrázku, a klikněte na „ generovat ' knoflík:
Výstup ukazuje, že byla použita funkce stabilního difúzního malování.
Výhody stabilní difúze a použití
Stabilní difúzní malba má několik výhod oproti jiným metodám malby, jako jsou:
- Dokáže spravovat velké oblasti chybějících pixelů a složité textury.
- Dokáže na snímku zachovat ostré hrany a jemné detaily.
- Může se vyhnout artefaktům, jako je rozmazání, zvonění nebo přílišné vyhlazování.
- Lze jej snadno implementovat a paralelizovat pomocí standardních numerických metod.
Stabilní difúzní malování lze použít pro různé aplikace, jako jsou:
- Obnova obrazu : oprava poškozených nebo znehodnocených obrázků, jako jsou staré fotografie, malby nebo dokumenty.
- Úprava obrázků : odstranění nežádoucích objektů nebo oblastí z obrázků, jako jsou loga, vodoznaky nebo kazy.
- Dokončení obrazu : vyplnění chybějících oblastí v obrazech, jako jsou okluze, díry nebo mezery.
Závěr
Stable Diffusion inpainting nabízí výkonné a uživatelsky přívětivé řešení pro obnovu chybějících nebo poškozených oblastí v obrazech. Použitím konceptu šíření obrazu uživatelé integrují namalovaný obsah s původním obrazem, čímž zajistí vizuální soudržnost a minimalizují artefakty. Díky intuitivnímu grafickému rozhraní a nastavitelným parametrům mohou uživatelé snadno označit oblasti malování a ovládat proces malování. Tento článek vysvětlil hlavní kroky a výhody použití stabilního difúzního malování a některé jeho aplikace.