Trainingsargumenten instellen
Na het tokenizen van je klantenservice-interacties moet je je trainingsargumenten instellen voordat je een voorgetraind model kunt fine-tunen.
TrainingArguments is voor je geladen.
Deze oefening maakt deel uit van de cursus
Introductie tot LLM’s in Python
Oefeninstructies
- Maak een instantie van
TrainingArguments(). - Stel de evaluatiestrategie in op
"epoch". - Stel drie trainingsepochs in.
- Stel de batchgroottes voor zowel training als evaluatie in op drie.
Praktische interactieve oefening
Probeer deze oefening eens door deze voorbeeldcode in te vullen.
# Set up an instance of TrainingArguments
training_args = ____(
output_dir="./finetuned",
# Set the evaluation strategy
____,
# Specify the number of epochs
____=3,
learning_rate=2e-5,
# Set the batch sizes
____=3,
____=3,
weight_decay=0.01
)