Estabelecer argumentos de treinamento
Depois de tokenizar suas interações de suporte ao cliente, você precisa configurar seus argumentos de treinamento antes de ajustar um modelo pré-treinado.
TrainingArguments foi carregado para você.
Este exercício faz parte do curso
Introdução aos LLMs em Python
Instruções do exercício
- Configure uma instância do site
TrainingArguments(). - Defina a estratégia de avaliação como
"epoch". - Especifique três épocas de treinamento.
- Defina os tamanhos de lote para treinamento e avaliação como três.
Exercício interativo prático
Experimente este exercício completando este código de exemplo.
# Set up an instance of TrainingArguments
training_args = ____(
output_dir="./finetuned",
# Set the evaluation strategy
____,
# Specify the number of epochs
____=3,
learning_rate=2e-5,
# Set the batch sizes
____=3,
____=3,
weight_decay=0.01
)