Learn the structure of HTML. We begin by explaining why web scraping can be a valuable addition to your data science toolbox and then delving into some basics of HTML. We end the chapter by giving a brief introduction on XPath notation, which is used to navigate the elements within HTML code.

Web Scraping Overview

Web-scraping is not nonsense!

HyperText Markup Language

HTML tree wordy navigation

From Tree to HTML

Attributes

Keep it Classy

Finding href

Crash Course in XPath

Where am I?

It's Time to P

A classy span

Introduction to HTML

Leverage XPath syntax to explore scrapy selectors. Both of these concepts will move you towards being able to scrape an HTML document.

XPathology

Counting Elements in the Wild

Body Appendages

Choose DataCamp!

Off the Beaten XPath

Where it's @

Check your Class

Hyper(link) Active

Secret Links

Selector Objects

XPath Chaining

Divvy Up This Exercise

The Source of the Source

Course Class by Inspection

Requesting a Selector

XPaths and Selectors

Learn CSS Locator syntax and begin playing with the idea of chaining together CSS Locators with XPath. We also introduce Response objects, which behave like Selectors but give us extra tools to mobilize our scraping efforts across multiple websites. 

From XPath to CSS

The (X)Path to CSS Locators

Get an "a" in this Course

The CSS Wildcard

CSS Attributes and Text Selection

You've been `href`ed

Top Level Text

All Level Text

Respond Please!

Reveal By Response

Responding with Selectors

Selecting from a Selection

Survey

Titular

Scraping with Children

CSS Locators, Chaining, and Responses

Learn to create web crawlers with scrapy. These scrapy spiders will crawl the web through multiple pages, following links to scrape each of those pages automatically according to the procedures we've learned in the previous chapters.

İlk Spider'ını Yaz

Spider'dan Kalıtım

URL’leri Savur

İstekleri Başlat

Kendine Referans Vermek Ne Kadar Şık

Start Requests ile Başlamak

Ayrıştır ve Tırman

Mahlaslar

Tarayıcı Zamanı

Bitirme Projesi

Çalıştırma Zamanı

DataCamp Açıklamaları

Kapsamlı Crawler

Final

Spiders

DataCamp webpage HTML

İnternete yayılmış bilgileri alıp ayrıştırabilen araçlar geliştirmek, veri biliminin pek çok alanında geçmişte olduğu gibi bugün de değerlidir. Bu derste HTML kodunu nasıl gezip ayrıştıracağını ve web sitelerini otomatik olarak tarayacak araçlar geliştirmeyi öğreneceksin. Kazıma işlemlerimizi çok yönlü Python kütüphanesi scrapy ile yapıyor olsak da, burada öğreneceğin pek çok tekniği BeautifulSoup ve Selenium gibi diğer popüler Python kütüphanelerinde de uygulayabilirsin. Dersi tamamladığında HTML yapısını zihninde sağlam bir modele oturtacak, HTML kodunu ayrıştırıp istediğin bilgilere erişecek araçlar geliştirebilecek ve web’i ölçekli bir şekilde taramak için basit scrapy spider’ları oluşturabileceksin.

Intermediate Python

Python kütüphanesi scrapy ile internetten bilgi almayı ve işlemeyi öğrenin.

Python ile Web Scraping

Python kütüphanesi scrapy kullanarak internetten bilgi almayı ve ayrıştırmayı öğrenin.

İlk Spider'ını Yaz

Create Your Free Account