The web is a rich source of data from which you can extract various types of insights and findings. In this chapter, you will learn how to get data from the web, whether it is stored in files or in HTML. You'll also learn the basics of scraping and parsing web data.

Importing flat files from the web

Importing flat files from the web: your turn!

Opening and reading flat files from the web

Importing non-flat files from the web

HTTP requests to import files from the web

Performing HTTP requests in Python using urllib

Printing HTTP request results in Python using urllib

Performing HTTP requests in Python using requests

Scraping the web in Python

Parsing HTML with BeautifulSoup

Turning a webpage into data using BeautifulSoup: getting the text

Turning a webpage into data using BeautifulSoup: getting the hyperlinks

Importing data from the Internet

In this chapter, you will gain a deeper understanding of how to import data from the web. You will learn the basics of extracting data from APIs, gain insight on the importance of APIs, and practice extracting data by diving into the OMDB and Library of Congress APIs.

Introductie tot API's en JSON's

Tussendoorvraag: Wat is een JSON precies?

Een JSON laden en verkennen

Popquiz: Je JSON verkennen

API's en interactie met het wereldwijde web

Popquiz: Wat is een API?

API-verzoeken

JSON—van het web naar Python

De Wikipedia API verkennen

Interacting with APIs to import data from the web

In this chapter, you will consolidate your knowledge of interacting with APIs in a deep dive into the Twitter streaming API. You'll learn how to stream real-time Twitter data, and how to analyze and visualize it.

The Twitter API and Authentication

Streaming tweets

Load and explore your Twitter data

Twitter data to DataFrame

A little bit of Twitter text analysis

Plotting your Twitter data

Final Thoughts

Diving  deep into the Twitter API

Latitudes (XLS)

Tweets

Red wine quality

Course Glossary

Als data scientist moet je data opschonen, transformeren en bewerken, visualiseren, voorspellende modellen bouwen en deze modellen interpreteren. Voor het zover is, moet je weten hoe je data in Python krijgt. In de voorloper van deze cursus leerde je op verschillende manieren data importeren in Python: uit platte bestanden zoals .txt en .csv; uit bestanden van andere software zoals Excel-spreadsheets en bestanden van Stata, SAS en MATLAB; en uit relationele databases zoals SQLite en PostgreSQL. In deze cursus bouw je hierop voort door te leren hoe je data van het web importeert en hoe je data ophaalt via Application Programming Interfaces — API’s — zoals de Twitter streaming API, waarmee je real-time tweets kunt streamen.

De video’s bevatten live-transcripten die je kunt tonen door linksonder in de video’s op "Show transcript" te klikken.
De begrippenlijst van de cursus vind je rechts in de sectie met bronnen.
Om CPE-punten te behalen, moet je de cursus afronden en minimaal 70% scoren op de gekwalificeerde toets. Je gaat naar de toets door rechts op de callout voor CPE-punten te klikken.

Introduction to Importing Data in Python

Leer hoe je data in Python importeert van bronnen zoals het web en API's, zoals de Twitter API.

Gevorderd data importeren in Python

Verbeter je Python-vaardigheden voor het importeren van data en leer werken met web- en API-data.

Data-engineer in Python

Datawetenschapper in Python

Gegevens importeren en opschonen  in Python

Popquiz: Wat is een API?

Gevorderd data importeren in Python

Praktische interactieve oefening