1. Nauka
    2. /
  2. Kursy
    3. /
  3. Python में LLMs का परिचय
Connected

ćwiczenie

BLEU अनुवाद

आइए BLEU मेट्रिक से परिचित होते हैं.

Helsinki-NLP के Spanish-English अनुवाद मॉडल और BLEU मेट्रिक पर आधारित एक पाइपलाइन आपके लिए लोड की गई है, जो evaluate लाइब्रेरी के evaluate.load("bleu") का उपयोग करती है.

मूल्यांकन के लिए दिए गए इनपुट और रेफरेंसेज़ निम्न हैं:

input_sentence_1 = "Hola, ¿cómo estás?"

reference_1 = [
     ["Hello, how are you?", "Hi, how are you?"]
     ]

input_sentences_2 = ["Hola, ¿cómo estás?", "Estoy genial, gracias."]

references_2 = [
     ["Hello, how are you?", "Hi, how are you?"],
     ["I'm great, thanks.", "I'm great, thank you."]
     ]

Instrukcje 1/2

undefined XP
  • 1
    • input_sentence_1 में दिए गए इनपुट वाक्य को ट्रांसलेटर को पास करें, फिर reference_1 का उपयोग करके BLEU मेट्रिक की गणना करें.
  • 2
    • इसी प्रक्रिया को दोहराएँ, अनुवाद के लिए दो Spanish वाक्यों वाली सूची input_sentences_2 पास करें.