Web là một nguồn dữ liệu phong phú, từ đó bạn có thể khai thác nhiều dạng thông tin và phát hiện. Trong chương này, bạn sẽ học cách lấy dữ liệu từ web, dù chúng được lưu trong tệp hay nằm trong HTML. Bạn cũng sẽ học những kiến thức cơ bản về trích xuất và phân tích cú pháp dữ liệu web.

Nhập tệp phẳng từ web

Import các flat file từ web: đến lượt bạn!

Mở và đọc các flat file từ web

Nhập các tệp không phải dạng phẳng từ web

Gửi yêu cầu HTTP để nhập tệp từ web

Thực hiện HTTP request trong Python bằng urllib

In Python, in kết quả yêu cầu HTTP bằng urllib

Thực hiện HTTP request trong Python bằng requests

Trích xuất dữ liệu web bằng Python

Phân tích HTML với BeautifulSoup

Biến một trang web thành dữ liệu với BeautifulSoup: lấy văn bản

Biến trang web thành dữ liệu với BeautifulSoup: lấy các siêu liên kết

Nhập dữ liệu từ Internet

Trong chương này, bạn sẽ hiểu sâu hơn về cách nhập dữ liệu từ web. Bạn sẽ học những điều cơ bản về trích xuất dữ liệu từ API, hiểu tầm quan trọng của API, và thực hành trích xuất dữ liệu bằng cách đi sâu vào các API OMDB và Library of Congress.

Giới thiệu về API và JSON

Câu đố nhanh: JSON chính xác là gì?

Nạp và khám phá một JSON

Câu đố nhanh: Khám phá JSON của bạn

API và tương tác với World Wide Web

Câu đố nhanh: API là gì?

Yêu cầu API

JSON – từ web vào Python

Khám phá Wikipedia API

Tương tác với API để nhập dữ liệu từ web

Trong chương này, bạn sẽ củng cố kiến thức về tương tác với API thông qua phần chuyên sâu về Twitter streaming API. Bạn sẽ học cách truyền dữ liệu Twitter theo thời gian thực, cũng như cách phân tích và trực quan hóa chúng.

Twitter API và xác thực

Stream tweet

Nạp và khám phá dữ liệu Twitter của bạn

Đưa dữ liệu Twitter vào DataFrame

Phân tích văn bản Twitter đơn giản

Vẽ biểu đồ dữ liệu Twitter của bạn

Lời kết

Đi sâu vào Twitter API

Latitudes (XLS)

Course Glossary

Tweets

Red wine quality

Là một nhà khoa học dữ liệu, bạn sẽ cần làm sạch dữ liệu, xử lý và chuyển đổi chúng, trực quan hóa, xây dựng mô hình dự đoán và diễn giải các mô hình này. Tuy nhiên, trước khi làm được những việc đó, bạn cần biết cách đưa dữ liệu vào Python. Ở phần tiền truyện của khóa học này, bạn đã học nhiều cách nhập dữ liệu vào Python: từ các tệp phẳng như .txt và .csv; từ các tệp thuộc phần mềm khác như bảng tính Excel, tệp Stata, SAS và MATLAB; và từ các cơ sở dữ liệu quan hệ như SQLite và PostgreSQL. Trong khóa học này, bạn sẽ mở rộng nền tảng đó bằng cách học cách nhập dữ liệu từ web và lấy dữ liệu từ Application Programming Interfaces — API — như Twitter streaming API, cho phép chúng ta truyền các tweet theo thời gian thực.

Các video có bản chép lời trực tiếp mà bạn có thể hiển thị bằng cách nhấp vào "Show transcript" ở góc dưới bên trái của video.
Bảng thuật ngữ của khóa học nằm ở bên phải trong phần tài nguyên.
Để nhận tín chỉ CPE, bạn cần hoàn thành khóa học và đạt điểm 70% trong bài đánh giá đủ điều kiện. Bạn có thể điều hướng đến bài đánh giá bằng cách nhấp vào phần giới thiệu tín chỉ CPE ở bên phải.

Introduction to Importing Data in Python

Tìm hiểu cách nhập dữ liệu vào Python từ web và API như Twitter để truyền tải tweet thời gian thực.

Nhập dữ liệu nâng cao trong Python

Cải thiện kỹ năng nhập dữ liệu Python của bạn và học cách làm việc với dữ liệu web và API.

Kỹ sư dữ liệu trong Python

Chuyên gia phân tích dữ liệu trong Python

Nhập và làm sạch dữ liệu  trong Python

Câu đố nhanh: JSON chính xác là gì?

Nhập dữ liệu nâng cao trong Python

Bài tập tương tác thực hành