GoT की स्ट्रिंग को tokenize करें
टेक्स्ट पर काम शुरू करते समय पहला मानक कदम उसे tokenize करना होता है. यानी, बड़ी स्ट्रिंग को छोटी-छोटी स्ट्रिंग्स में बाँटना, जो आमतौर पर एकल शब्द (tokens) होते हैं.
आपके लिए एक स्ट्रिंग GoT बनाई गई है, जिसमें George R.R. Martin की Game of Thrones से एक quote है. आपका काम है इसे अलग-अलग tokens में बाँटना.
यह अभ्यास पाठ्यक्रम का हिस्सा है
Python में Sentiment Analysis
अभ्यास निर्देश
nltkसे word tokenizing फंक्शन इम्पोर्ट करें.GoTस्ट्रिंग को word tokens में बदलें.
इंटरैक्टिव व्यावहारिक अभ्यास
इस अभ्यास को इस नमूना कोड को पूरा करके आज़माएँ।
# Import the required function
from nltk import ____
# Transform the GoT string to word tokens
print(____(____))