Koder języka szekspirowskiego

Masz już wstępnie przetworzone teksty szekspirowskie – teraz czas zakodować je w postaci numerycznej. Zdefiniujesz kolejne kroki kodowania, a następnie złożysz je w potok przetwarzania. Aby sprawnie obsługiwać duże ilości danych i efektywnie przeprowadzić kodowanie, skorzystasz z klas Dataset i DataLoader z PyTorch, które umożliwiają tworzenie partii danych i ich losowe mieszanie.

Następujące elementy zostały już załadowane: torch, nltk, stopwords, PorterStemmer, get_tokenizer, CountVectorizer, Dataset, DataLoader oraz preprocess_sentences.

Dostępna jest też zmienna processed_shakespeare zawierająca przetworzony tekst szekspirowski.

Zdefiniuj klasę zbioru danych ShakespeareDataset i uzupełnij metody __init__ oraz __getitem__.

ćwiczenie

Koder języka szekspirowskiego

Instrukcje 1/3

.css-6su6fj{-webkit-flex-shrink:0;-ms-flex-negative:0;flex-shrink:0;}ćwiczenie

Instrukcje 1/3

ćwiczenie