Виявлення об'єктів
У цій вправі ви скористаєтеся тим самим набором даних flickr, що й раніше, який містить 30 000 зображень з підписами. Тепер ви знайдете обмежувальні рамки об'єктів, виявлених моделлю.

Зразок зображення (image) і модуль конвеєра (pipeline) вже завантажено.
Ця вправа є частиною курсу
Багатомодальні моделі з Hugging Face
Інструкції до вправи
- Завантажте конвеєр
object-detectionз попередньо навченою моделлюfacebook/detr-resnet-50. - Знайдіть
labelвиявленого об'єкта. - Знайдіть відповідний показник упевненості
scoreдля виявленого об'єкта. - Знайдіть координати обмежувальної рамки
boxдля виявленого об'єкта.
Інтерактивна практична вправа
Спробуйте виконати цю вправу, доповнивши цей зразок коду.
# Load the object-detection pipeline
pipe = pipeline("____", "____", revision="no_timm")
pred = pipe(image)
outputs = pipe(image)
for n, obj in enumerate(outputs):
# Find the detected label
label = ____
# Find the confidence score of the prediction
confidence = ____
# Obtain the bounding box coordinates
box = ____
plot_args = {"linewidth": 1, "edgecolor": colors[n], "facecolor": 'none'}
rect = patches.Rectangle((box['xmin'], box['ymin']), box['xmax']-box['xmin'], box['ymax']-box['ymin'], **plot_args)
ax.add_patch(rect)
print(f"Detected {label} with confidence {confidence:.2f} at ({box['xmin']}, {box['ymin']}) to ({box['xmax']}, {box['ymax']})")
plt.show()