トークナイズ：文
Animal Farm は、中学校の英語の授業でよく課題図書として扱われる人気の一冊です。ここでは、このテキストを少し探究し、教師が生徒にこの本を割り当てる際に使える要約統計量を用意します。章が10あることはすでに分かっていますが、トークナイズを使えば、文数や語数、段落数まで数えられることも知っていますよね。この演習では、動画で学んだトークナイズの手法を使って、Animal Farm を文単位に分割し、章ごとに文数を数えていきます。
この演習はコースの一部です
Rで学ぶ自然言語処理入門
実践的なインタラクティブ演習
このサンプルコードを完成させて、この演習に挑戦してみましょう。
# Split the text_column into sentences
animal_farm %>%
___(output = "sentences", input = text_column, token = ___)