Vytvoř video!
Čas vyzkoušet si vytvoření videa přímo z textového promptu! Použij pipeline CogVideoXPipeline a následující prompt pro řízení generování:
A robot doing the robot dance. The dance floor has colorful squares and a glitterball.
Poznámka: Inference u modelů pro generování videa může trvat poměrně dlouho, proto jsme pro tebe vygenerované video předem načetli. Spuštění jiných promptů nová videa nevygeneruje.
Třída CogVideoXPipeline je již naimportovaná.
Toto cvičení je součástí kurzu
Multi-Modal Models with Hugging Face
Pokyny k cvičení
- Vytvoř
CogVideoXPipelinez checkpointuTHUDM/CogVideoX-2b. - Spusť pipeline se zadaným promptem, nastav počet inferenčních kroků na
20, počet generovaných snímků na20a guidance scale na6.
Interaktivní cvičení na vyzkoušení si v praxi
Vyzkoušejte si toto cvičení dokončením tohoto ukázkového kódu.
prompt = "A robot doing the robot dance. The dance floor has colorful squares and a glitterball."
# Create a CogVideoXPipeline
pipe = ____(
"____",
torch_dtype=torch.float16
)
# Run the pipeline with the provided prompt
video = pipe(
prompt=____,
num_inference_steps=____,
num_frames=____,
guidance_scale=____
)
video = video.frames[0]
video_path = export_to_video(video, "output.mp4", fps=8)
video = VideoFileClip(video_path)
video.write_gif("video_ex.gif")