Створення bag збереженого тексту
Цього разу ваш колега зберіг відгуки у кількох текстових файлах. Файлів декілька, і в кожному — багато відгуків. Кожен відгук розміщено в окремому рядку текстового файла.
Ви хочете завантажити їх у Dask ліниво, щоб скористатися паралельною обробкою та проаналізувати їх швидше.
dask.bag імпортовано для вас як db.
Ця вправа є частиною курсу
Паралельне програмування з Dask у Python
Інструкції до вправи
- Використайте функцію
read_text(), щоб завантажити всі файли.txtу теціdata/tripadvisor_hotel_reviews. - Порахуйте кількість відгуків у bag.
- Використайте метод bag
.compute(), щоб вивести відповідь.
Інтерактивна практична вправа
Спробуйте виконати цю вправу, доповнивши цей зразок коду.
# Load in all the .txt files inside data/tripadvisor_hotel_reviews
review_bag = ____
# Count the number of reviews in the bag
review_count = review_bag.____
# Compute and print the answer
print(____)