1. Học hỏi
  2. /
  3. Khoa Học
  4. /
  5. Modele Multi-Modale cu Hugging Face

Connected

Bài tập

Generarea de descrieri cu pipeline

În acest exercițiu, vei folosi din nou setul de date flickr, care conține 30.000 de imagini și descrierile asociate. De data aceasta, vei genera o descriere pentru imaginea de mai jos folosind un pipeline în loc de clasele auto.

Fotografie cu un bărbat care stă pe o scară și curăță un geam

Setul de date (dataset) a fost încărcat cu următoarea structură:

Dataset({
    features: ['image', 'caption', 'sentids', 'split', 'img_id', 'filename'],
    num_rows: 10
})

Modulul pipeline (pipeline) a fost încărcat.

Hướng dẫn

100 XP
  • Încarcă pipeline-ul image-to-text cu modelul preantrenat Salesforce/blip-image-captioning-base.
  • Folosește pipeline-ul pentru a genera o descriere pentru imaginea de la indexul 3.