1. Learn
  2. /
  3. 课程
  4. /
  5. Python 中的 LLM 入门

Connected

道练习

BLEU 翻译

让我们熟悉一下 BLEU 指标。

已为您加载了一个基于 Helsinki-NLP 西班牙语-英语翻译模型和 BLEU 指标的流水线,使用 evaluate 库中的 evaluate.load("bleu")。

给定以下用于评估的输入与参考译文:

input_sentence_1 = "Hola, ¿cómo estás?"

reference_1 = [
     ["Hello, how are you?", "Hi, how are you?"]
     ]

input_sentences_2 = ["Hola, ¿cómo estás?", "Estoy genial, gracias."]

references_2 = [
     ["Hello, how are you?", "Hi, how are you?"],
     ["I'm great, thanks.", "I'm great, thank you."]
     ]

说明 1/2

undefined XP
  • 1
    • 将 input_sentence_1 中的输入句子传给翻译器,然后使用 reference_1 计算 BLEU 指标。
  • 2
    • 重复上述过程,将包含两句西班牙语的列表 input_sentences_2 传入进行翻译。