ПочатиПочніть безкоштовно

VQA для документів із LayoutLM

Від VQA для зображень до VQA для документів! У цій вправі ви використаєте модель layoutlm-document-qa, щоб визначити загальну кількість годин навчання, наданих працівникам у 2012–2013 роках, за цією зображенням документа:

Newsletter from an ICT company

Набір даних (dataset) завантажено, а модуль конвеєра (pipeline) імпортовано.

Ця вправа є частиною курсу

Багатомодальні моделі з Hugging Face

Переглянути курс

Інструкції до вправи

  • Завантажте конвеєр із завданням 'document-question-answering' і чекпоінтом 'impira/layoutlm-document-qa'.
  • Обробіть документ у точці даних 61 множини test з dataset із доречним підказом, щоб з'ясувати, скільки днів формального навчання було надано працівникам у 2012–2013 роках.

Інтерактивна практична вправа

Спробуйте виконати цю вправу, доповнивши цей зразок коду.

# Load the document-question-answering pipeline with the pretrained model
pipe = ____

# Process datapoint 61 to find the amount of training days
result = ____(dataset["____"][61]["____"], "____")

print(result)
Редагувати та запускати код