1. Learn
  2. /
  3. कोर्स
  4. /
  5. Python में LLMs का परिचय

Connected

अभ्यास

evaluate मेट्रिक्स का उपयोग

अब ग्राहक सपोर्ट इंटरैक्शन को वर्गीकृत करने वाले अपने LLM का मूल्यांकन करने का समय है। जहाँ आपने अपने फाइन-ट्यून किए गए मॉडल को छोड़ा था, वहीं से आगे बढ़ते हुए, आप अब अपने मॉडल के प्रदर्शन का आकलन करने के लिए एक नया वैलिडेशन डेटासेट उपयोग करेंगे.

कुछ इंटरैक्शन और उनके संबंधित लेबल आपके लिए validate_text और validate_labels के रूप में लोड कर दिए गए हैं। model और tokenizer भी लोड हैं.

निर्देश

100 XP
  • outputs में मौजूद मॉडल logits से predicted labels निकालें.
  • वास्तविक (validate_labels) और predicted labels की तुलना करके लोड की गई चारों मेट्रिक्स compute करें.