The web is a rich source of data from which you can extract various types of insights and findings. In this chapter, you will learn how to get data from the web, whether it is stored in files or in HTML. You'll also learn the basics of scraping and parsing web data.

Importing flat files from the web

Importing flat files from the web: your turn!

Opening and reading flat files from the web

Importing non-flat files from the web

HTTP requests to import files from the web

Performing HTTP requests in Python using urllib

Printing HTTP request results in Python using urllib

Performing HTTP requests in Python using requests

Scraping the web in Python

Parsing HTML with BeautifulSoup

Turning a webpage into data using BeautifulSoup: getting the text

Turning a webpage into data using BeautifulSoup: getting the hyperlinks

Importing data from the Internet

In this chapter, you will gain a deeper understanding of how to import data from the web. You will learn the basics of extracting data from APIs, gain insight on the importance of APIs, and practice extracting data by diving into the OMDB and Library of Congress APIs.

Introdução a APIs e JSONs

Teste rápido: O que exatamente é um JSON?

Carregando e explorando um JSON

Teste rápido: Explorando você JSON

APIs e interagindo com a rede mundial de computadores

Teste rápido: O que é um API?

API solicitações

JSON-da Web para Python

Verificando a Wikipedia API

Interacting with APIs to import data from the web

In this chapter, you will consolidate your knowledge of interacting with APIs in a deep dive into the Twitter streaming API. You'll learn how to stream real-time Twitter data, and how to analyze and visualize it.

The Twitter API and Authentication

Streaming tweets

Load and explore your Twitter data

Twitter data to DataFrame

A little bit of Twitter text analysis

Plotting your Twitter data

Final Thoughts

Diving  deep into the Twitter API

Latitudes (XLS)

Tweets

Red wine quality

Course Glossary

Como cientista de dados, você vai precisar limpar dados, tratá-los e transformá-los, visualizá-los, construir modelos preditivos e interpretar esses modelos. Antes disso, porém, é essencial saber como trazer dados para o Python. No curso anterior, você aprendeu várias formas de importar dados para o Python: de arquivos simples como .txt e .csv; de arquivos nativos de outros softwares, como planilhas do Excel e arquivos do Stata, SAS e MATLAB; e de bancos de dados relacionais como SQLite e PostgreSQL. Neste curso, você vai ampliar essa base aprendendo a importar dados da web e a buscar dados em APIs (Application Programming Interfaces), como a API de streaming do Twitter, que permite transmitir tweets em tempo real.

Os vídeos têm transcrições ao vivo que você pode exibir clicando em "Show transcript" no canto inferior esquerdo dos vídeos.
O glossário do curso está disponível à direita, na seção de recursos.
Para obter créditos de CPE, você precisa concluir o curso e atingir 70% na avaliação qualificada. Você pode acessar a avaliação clicando no destaque de créditos de CPE à direita.

Introduction to Importing Data in Python

Aprenda a importar dados para Python de fontes como a web e APIs, como a API do Twitter para tweets em tempo real.

Importação Intermediária de Dados em Python

Melhore suas habilidades de importação de dados em Python e aprenda a trabalhar com dados da web e de APIs.

Engenheiro de dados Em Python

Cientista de dados Em Python

Importação e limpeza de dados  Em Python

Teste rápido: O que exatamente é um JSON?

Importação Intermediária de Dados em Python

exercicio interativo prático