Creează un videoclip!
A venit momentul să creezi un videoclip pornind exclusiv de la un prompt text! Vei folosi un pipeline CogVideoXPipeline și următorul prompt pentru a ghida generarea:
Un robot care dansează robotul. Pista de dans are pătrate colorate și o oglindă disco.
Notă: Inferența pe modelele de generare video poate dura mult timp, așa că videoclipul generat a fost preîncărcat pentru tine. Rularea unor prompturi diferite nu va genera videoclipuri noi.
Clasa CogVideoXPipeline a fost deja importată pentru tine.
Acest exercițiu face parte din cursul
Modele Multi-Modale cu Hugging Face
Instrucțiuni pentru exercițiu
- Creează un
CogVideoXPipelinedin checkpoint-ulTHUDM/CogVideoX-2b. - Rulează pipeline-ul cu promptul furnizat, setând numărul de pași de inferență la
20, numărul de cadre de generat la20și scala de ghidare la6.
Exercițiu interactiv practic
Încearcă acest exercițiu completând acest cod de exemplu.
prompt = "A robot doing the robot dance. The dance floor has colorful squares and a glitterball."
# Create a CogVideoXPipeline
pipe = ____(
"____",
torch_dtype=torch.float16
)
# Run the pipeline with the provided prompt
video = pipe(
prompt=____,
num_inference_steps=____,
num_frames=____,
guidance_scale=____
)
video = video.frames[0]
video_path = export_to_video(video, "output.mp4", fps=8)
video = VideoFileClip(video_path)
video.write_gif("video_ex.gif")