1. 学ぶ
    2. /
  2. コース
    3. /
  3. Llama 3 のファインチューニング
Connected

演習

評価用にデータセットをフィルタリングする

あなたは病院が新規患者の受け入れに利用する、社内のヘルスケア向けチャットボットの学習・評価パイプラインを構築しています。

あなたのタスクは、LLM が医療系の質問に回答できるかを評価するために、MedQuad-MedicalQnADataset を読み込むパイプラインを作ることです。dataset_name に格納されたデータセットの train 分割から先頭500件のみを評価用データとして含め、データセットを変数 ds に読み込んでください。

指示

100 XP
  • datasets から必要な関数とクラスをインポートします。
  • データセットを変数 ds に読み込みます。
  • dataset_name に格納されたデータセットの train 分割の先頭500件のみが評価用になるように、ds を加工します。