1. Learn
    2. /
  2. कोर्स
    3. /
  3. Python में LLMs का परिचय
Connected

अभ्यास

Perplexity का मूल्यांकन

टेक्स्ट जेनरेट करने और perplexity स्कोर का मूल्यांकन करने की कोशिश कीजिए.

आपको कुछ input_text दिया गया है जो एक वाक्य की शुरुआत है: "Current trends show that by 2030 ".

बाकी वाक्य को जेनरेट करने के लिए किसी LLM का उपयोग करें.

एक AutoModelForCausalLM मॉडल और उसका tokenizer पहले से model और tokenizer वैरिएबल के रूप में लोड किया गया है.

निर्देश

100 XP
  • input_text को encode कीजिए और उसे दिए गए text generation मॉडल में पास कीजिए.
  • जेनरेट किए गए टेक्स्ट पर mean_perplexity स्कोर को लोड करके compute कीजिए.