1. Học hỏi
    2. /
  2. Khoa Học
    3. /
  3. Mô hình đa phương thức với Hugging Face
Connected

Bài tập

VQA cho tài liệu với LayoutLM

Từ VQA với hình ảnh sang VQA với tài liệu! Trong bài tập này, bạn sẽ dùng mô hình layoutlm-document-qa để xác định tổng số giờ đào tạo đã cung cấp cho nhân viên trong các năm 2012-2013 từ ảnh tài liệu sau:

Newsletter from an ICT company

Bộ dữ liệu (dataset) đã được nạp và mô-đun pipeline (pipeline) đã được nhập.

Hướng dẫn

100 XP
  • Tải pipeline với tác vụ 'document-question-answering' và checkpoint 'impira/layoutlm-document-qa'.
  • Xử lý tài liệu ở điểm dữ liệu 61 của tập test từ dataset với một prompt phù hợp để tìm xem có bao nhiêu ngày đào tạo chính quy đã được cung cấp cho nhân viên trong giai đoạn 2012-2013.