ComenzarEmpieza gratis

BLEU traducciones

Familiaricémonos con la BLEU métrica.

Se ha cargado para ti un pipeline basado en el modelo de traducción español-inglés Helsinki-NLP y en la métrica BLEU, utilizando evaluate.load("bleu") de la biblioteca evaluate.

Dadas las siguientes entradas y referencias para la evaluación:

input_sentence_1 = "Hola, ¿cómo estás?"

reference_1 = [

     ["Hello, how are you?", "Hi, how are you?"]

     ]




input_sentences_2 = ["Hola, ¿cómo estás?", "Estoy genial, gracias."]

references_2 = [

     ["Hello, how are you?", "Hi, how are you?"],

     ["I'm great, thanks.", "I'm great, thank you."]

     ]

Este ejercicio forma parte del curso

Introduction to LLMs in Python

Ver curso

Ejercicio interactivo práctico

Pruebe este ejercicio completando este código de muestra.

translator = pipeline("translation", model="Helsinki-NLP/opus-mt-es-en")

# Translate the first input sentence then calucate the BLEU metric for translation quality
translated_output = ____

translated_sentence = translated_output[0]['translation_text']

print("Translated:", translated_sentence)

results = bleu.____(predictions=____, references=____)
print(results)
Editar y ejecutar código