Збереження попередньо оброблених наборів даних
У межах вашого проєкту чат-бота служби підтримки ви підготували набір даних для тонкого налаштування моделі Llama. Наступний крок — зберегти цей набір даних, щоб згодом можна було завантажити його без повторення кроків попередньої обробки. Це дозволить вашій команді перевикористовувати набір даних у кількох експериментах і ітераціях.
Ця вправа є частиною курсу
Тонке налаштування з Llama 3
Інструкції до вправи
- Збережіть попередньо оброблений набір даних
dsна диск. - Завантажте збережений набір даних у нову змінну
ds_preprocessed. - Виведіть перший елемент
ds_preprocessed.
Інтерактивна практична вправа
Спробуйте виконати цю вправу, доповнивши цей зразок коду.
from datasets import load_from_disk
# Save the dataset to disk
____
# Load the dataset from disk
ds_preprocessed = ____
# Print the first element of the loaded dataset
print(____)