Learn the structure of HTML. We begin by explaining why web scraping can be a valuable addition to your data science toolbox and then delving into some basics of HTML. We end the chapter by giving a brief introduction on XPath notation, which is used to navigate the elements within HTML code.

Web Scraping Overview

Web-scraping is not nonsense!

HyperText Markup Language

HTML tree wordy navigation

From Tree to HTML

Attributes

Keep it Classy

Finding href

Crash Course in XPath

Where am I?

It's Time to P

A classy span

Introduction to HTML

Leverage XPath syntax to explore scrapy selectors. Both of these concepts will move you towards being able to scrape an HTML document.

XPathology

Counting Elements in the Wild

Body Appendages

Choose DataCamp!

Off the Beaten XPath

Where it's @

Check your Class

Hyper(link) Active

Secret Links

Selector Objects

XPath Chaining

Divvy Up This Exercise

The Source of the Source

Course Class by Inspection

Requesting a Selector

XPaths and Selectors

Learn CSS Locator syntax and begin playing with the idea of chaining together CSS Locators with XPath. We also introduce Response objects, which behave like Selectors but give us extra tools to mobilize our scraping efforts across multiple websites. 

Da XPath a CSS

Dal (X)Path ai CSS Locator

Ottieni una "a" in questo corso

Il carattere jolly in CSS

Attributi CSS e selezione del testo

Sei stato `href`-izzato

Testo di livello superiore

Testo a tutti i livelli

Rispondi, per favore!

Svela con Response

Rispondere con i Selector

Selezionare da una selezione

Sondaggio

Titolarità

Scraping con i figli

CSS Locators, Chaining, and Responses

Learn to create web crawlers with scrapy. These scrapy spiders will crawl the web through multiple pages, following links to scrape each of those pages automatically according to the procedures we've learned in the previous chapters.

Your First Spider

Inheriting the Spider

Hurl the URLs

Start Requests

Self Referencing is Classy

Starting with Start Requests

Parse and Crawl

Pen Names

Crawler Time

Capstone

Time to Run

DataCamp Descriptions

Capstone Crawler

The Finale

Spiders

DataCamp webpage HTML

La capacità di creare strumenti in grado di recuperare e analizzare informazioni distribuite sul web è stata e continua a essere preziosa in molti ambiti della data science. In questo corso imparerai a navigare e interpretare il codice HTML e a creare strumenti per esplorare automaticamente i siti web. Anche se lo scraping verrà effettuato con la versatile libreria Python scrapy, molte delle tecniche che imparerai possono essere applicate anche ad altre librerie Python popolari, come BeautifulSoup e Selenium. Al termine del corso avrai un solido modello mentale della struttura HTML, saprai creare strumenti per analizzare il codice HTML e accedere alle informazioni desiderate, e potrai creare semplici spider di scrapy per esplorare il web su larga scala.

Intermediate Python

Impara a recuperare e analizzare dati dal web usando la libreria Python scrapy.

Web Scraping in Python

Impara a recuperare e analizzare le informazioni da Internet usando la libreria Python scrapy.

Rispondi, per favore!

Create Your Free Account