BaşlayınÜcretsiz başlayın

Pipeline ile başlık (caption) üretimi

Bu egzersizde yine, 30.000 görsel ve onlara ait başlıklar (caption) içeren flickr veri kümesini kullanacaksın. Şimdi, auto sınıflar yerine bir pipeline kullanarak aşağıdaki görsel için bir başlık üreteceksin.

Photo of a man standing on a ladder cleaning a window

Veri kümesi (dataset) aşağıdaki yapıyla yüklendi:

Dataset({
    features: ['image', 'caption', 'sentids', 'split', 'img_id', 'filename'],
    num_rows: 10
})

Pipeline modülü (pipeline) yüklendi.

Bu egzersiz, kursun bir parçasıdır

Hugging Face ile Multi-Modal Modeller

Kursa Göz Atın

Egzersiz talimatları

  • Salesforce/blip-image-captioning-base pretrained modeliyle image-to-text pipeline'ını yükle.
  • Pipeline'ı kullanarak indeks 3'teki görsel için bir başlık üret.

Uygulamalı etkileşimli egzersiz

Bu egzersizi bu örnek kodu tamamlayarak deneyin.

# Load the image-to-text pipeline
pipe = pipeline(task="____", model="____")

# Use the pipeline to generate a caption with the image of datapoint 3
pred = ____(dataset[3]["____"])

print(pred)
Kodu Düzenle ve Çalıştır