对《葛底斯堡演说》进行分词
在本练习中，您将对史上最著名的演讲之一进行分词：美国总统亚伯拉罕·林肯在南北战争期间发表的《葛底斯堡演说》。
整段演讲已作为字符串保存为 gettysburg。
本练习是课程的一部分
Python 中的 NLP 特征工程
练习说明
- 使用
spacy.load()加载en_core_web_sm模型。 - 为字符串
gettysburg创建一个 Doc 对象doc。 - 使用列表推导式遍历
doc，生成各个词元的文本。
交互式实操练习
通过完成这段示例代码来试试这个练习。
import spacy
# Load the en_core_web_sm model
nlp = ____.____(____)
# Create a Doc object
doc = ____(____)
# Generate the tokens
tokens = [token.____ for token in ____]
print(tokens)