1. 학습
  2. /
  3. 강의
  4. /
  5. Python으로 배우는 LLM 입문

Connected

연습 문제

Perplexity 평가하기

텍스트를 생성하고 perplexity 점수를 평가해 보세요.

문장 시작 부분인 input_text가 제공됩니다: "Current trends show that by 2030 ".

LLM을 사용해 문장의 나머지를 생성하세요.

AutoModelForCausalLM 모델과 해당 tokenizer는 model, tokenizer 변수로 이미 로드되어 있어요.

지침

100 XP
  • input_text를 인코딩하고, 제공된 텍스트 생성 모델에 전달하세요.
  • 생성된 텍스트에 대해 mean_perplexity 점수를 불러와 계산하세요.