1. Uczyć się
    2. /
  2. Courses
    3. /
  3. Nhập môn Xử lý Ngôn ngữ Tự nhiên với R
Connected

Exercise

Tiền xử lý văn bản: loại bỏ stop words

Stop words xuất hiện ở khắp nơi trong văn bản. Tuy nhiên, khi bạn muốn đo mức độ giống nhau giữa hai đoạn văn bản hoặc cố gắng tìm chủ đề trong văn bản, stop words có thể gây nhiễu. Trong cuốn Animal Farm, chương đầu chỉ có 2.636 từ, nhưng gần 200 trong số đó là từ "the".

Thông thường, "the" không giúp ích cho các dự án phân tích văn bản. Trong bài tập này, bạn sẽ loại bỏ stop words khỏi chương đầu tiên của Animal Farm.

Instrukcje 1 / 3

undefined XP
    1
    2
    3
  • Tách văn bản của cột text_column thành các từ (tokenize).