1. Učit se
  2. /
  3. Kurzy
  4. /
  5. Multi-Modal Models with Hugging Face

Connected

cvičení

Inpainting obrázků

Pojďme posunout multimodální generování obrázků dál a zkombinovat ho s inpaintingem. Upravíš Van Goghův autoportrét tak, aby měl černý vous – použiješ k tomu StableDiffusionControlNetInpaintPipeline a masku obrázku, která už je pro tebe připravená (mask_image):

Famous Van Gogh painting and mask

Poznámka: Inference na difuzních modelech může trvat dlouho, proto jsme pro tebe výsledný obrázek předgenerovali. Spuštění různých promptů nové obrázky nevygeneruje.

Původní obrázek je načtený jako init_image, společně s kontrolním obrázkem (control_image) vytvořeným pomocí funkce make_inpaint_condition() z videa.

Pokyny

100 XP
  • Spusť pipeline s promptem navrženým tak, aby vygeneroval černý vous, zadej num_inference_steps=40 a předej argumenty init_image, mask_image a control_image.