Learn the structure of HTML. We begin by explaining why web scraping can be a valuable addition to your data science toolbox and then delving into some basics of HTML. We end the chapter by giving a brief introduction on XPath notation, which is used to navigate the elements within HTML code.

Übersicht: Web Scraping

Web Scraping ist kein Blödsinn!

Hypertext Markup Language

Navigation durch den HTML-Baum

Vom Baum zu HTML

Attribute

Eine klasse Aufgabe

Finde href

XPath-Crashkurs

Wo bin ich?

P ist an der Reihe

Eine span-nende Klasse

Introduction to HTML

Leverage XPath syntax to explore scrapy selectors. Both of these concepts will move you towards being able to scrape an HTML document.

XPathology

Counting Elements in the Wild

Body Appendages

Choose DataCamp!

Off the Beaten XPath

Where it's @

Check your Class

Hyper(link) Active

Secret Links

Selector Objects

XPath Chaining

Divvy Up This Exercise

The Source of the Source

Course Class by Inspection

Requesting a Selector

XPaths and Selectors

Learn CSS Locator syntax and begin playing with the idea of chaining together CSS Locators with XPath. We also introduce Response objects, which behave like Selectors but give us extra tools to mobilize our scraping efforts across multiple websites. 

From XPath to CSS

The (X)Path to CSS Locators

Get an "a" in this Course

The CSS Wildcard

CSS Attributes and Text Selection

You've been `href`ed

Top Level Text

All Level Text

Respond Please!

Reveal By Response

Responding with Selectors

Selecting from a Selection

Survey

Titular

Scraping with Children

CSS Locators, Chaining, and Responses

Learn to create web crawlers with scrapy. These scrapy spiders will crawl the web through multiple pages, following links to scrape each of those pages automatically according to the procedures we've learned in the previous chapters.

Your First Spider

Inheriting the Spider

Hurl the URLs

Start Requests

Self Referencing is Classy

Starting with Start Requests

Parse and Crawl

Pen Names

Crawler Time

Capstone

Time to Run

DataCamp Descriptions

Capstone Crawler

The Finale

Spiders

DataCamp webpage HTML

Die Fähigkeit, Tools zu entwickeln, die in der Lage sind, im Internet gespeicherte Informationen abzurufen und zu analysieren, war und ist in vielen Data Science-Bereichen wertvoll. In diesem Kurs lernst du, wie man HTML-Code durchsucht und analysiert und Tools zum automatischen Crawlen von Websites entwickelt. Obwohl wir unser Scraping mit der vielseitigen Python-Bibliothek Scrapy durchführen, können viele der Techniken, die du in diesem Kurs lernst, auch auf andere beliebte Python-Bibliotheken wie Beautiful Soup und Selenium angewendet werden. Nach Abschluss dieses Kurses verfügst du über ein solides Verständnis der HTML-Struktur, kannst Tools zum Parsen von HTML-Code und zum Abrufen der gewünschten Informationen erstellen und einen einfachen Scrapy-Spider zum Crawlen des Webs in großem Maßstab entwickeln.

Intermediate Python

Lerne, Informationen aus dem Internet mit der Python-Bibliothek Scrapy abzurufen und zu analysieren.

Web Scraping in Python

Lerne, wie du mit der Python-Bibliothek Scrapy Informationen aus dem Internet abrufst und auswertest.

Python-Entwickler

Navigation durch den HTML-Baum

Interaktive praktische Übung