將 GoT 的字串做斷詞
處理文字時的第一個標準步驟是「斷詞」(tokenize)。也就是把較長的字串拆成一個個較小的字串,通常是單字(token)。
系統已為你建立了一個 GoT 字串,內容是 George R.R. Martin 的《冰與火之歌:權力遊戲》中的一句名言。你的任務是把它切成單字 token。
本練習屬於課程
Python 情感分析
練習說明
- 從
nltk匯入用於斷詞的函式。 - 將
GoT字串轉換為單字 token。
動手互動練習
試著完成這個範例程式碼,體驗一下這個練習。
# Import the required function
from nltk import ____
# Transform the GoT string to word tokens
print(____(____))