1. Lernen
    2. /
  2. Kurse
    3. /
  3. PyTorch로 배우는 Transformer 모델
Connected

Übung

인코더-디코더 트랜스포머 구성하기

이제 DecoderLayer 클래스를 업데이트했고, 이에 맞춰 TransformerDecoder에도 동일한 변경이 반영되었으니, 모든 것을 하나로 묶을 준비가 되었어요. 클래스를 모듈식이고 계층적으로 설계했기 때문에 인코더-디코더 트랜스포머를 만들려면 두 클래스만 인스턴스화하면 돼요: TransformerDecoder와 TransformerEncoder.

Anleitung

100 XP
  • 인코더와 디코더 출력을 계산하도록 forward() 패스를 완성하세요.
  • 제공된 src_mask, tgt_mask, cross_mask를 사용해 input_tokens에 트랜스포머를 인스턴스화하고 호출하세요.