การประเมินด้วย EM

Exact Match ช่วยประเมินโมเดลในงาน extractive question answering โดยตรวจสอบว่าคำตอบตรงกันทุกตัวอักษรหรือไม่ — ตามชื่อที่บอกไว้แล้ว! มี predictions และ references สำหรับการประเมินให้พร้อมแล้ว รวมถึงไลบรารี evaluate ที่โหลดไว้ให้แล้วเช่นกัน