Bu bölümde, komut satırıyla web sunucularından veri dosyaları indirmeyi öğreneceğiz. Bu süreçte dokümantasyon kılavuzlarını, seçenek bayraklarını ve çoklu dosya işlemeyi de tanıyacağız.

curl kullanarak veri indirme

curl dokümantasyonunu kullanma

curl ile tek dosya indirme

curl ile birden çok dosya indirme

Wget kullanarak veri indirme

Wget Kurulumu

wget ile tek dosya indirme

Wget ile ileri düzey indirme

Birden çok dosya indirirken kısıtlamalar ayarlama

Wget ile bekleme süresi oluşturma

Wget ve curl ile veri indirme

Komut Satırında Veri İndirme

Veri yolculuğumuza indirmeden işlemeye doğru devam ediyoruz. Bu bölümde, verimizi ileri analizlere hazırlamak için csvkit komut satırı kütüphanesini kullanarak dönüştürme, ön izleme, filtreleme ve dosya üzerinde çeşitli işlemler yapacağız.

csvkit ile başlarken

csvkit için kurulum ve dokümantasyon

csvkit ile veriyi dönüştürme ve ön izleme

csvkit ile dosya dönüştürme ve özet istatistikler

csvkit ile verileri filtreleme

csvkit ile sütun başlıklarını yazdırma

csvkit ile sütuna göre veri filtreleme

csvkit ile satıra göre veri filtreleme

csvkit ile verileri istifleme ve komutları zincirleme

csvkit ile dosyaları istifleme

Operatörleri kullanarak komutları zincirleme

csvkit ile veri işleme

Komut Satırında Veri Temizleme ve Düzenleme

Bu bölümde, csvkit kütüphanesinin sunduğu olanaklara daha derinlemesine dalıyoruz. Özellikle, komut satırında yapabileceğimiz tablo oluşturma, veri çekme ve çeşitli ETL dönüşümleri gibi veritabanı işlemlerine odaklanacağız.

Veritabanından veri çekme

sql2csv belgelerini kullanma

sql2csv bağlayıcılarını anla

Veritabanından veri çekme alıştırması

SQL söz dizimi kullanarak veriyi değiştirme

Yerel bir CSV dosyasında SQL uygulama

Kabuk değişkenleriyle daha temiz betik yazımı

SQL kullanarak yerel CSV dosyalarını birleştirme

Veriyi tekrar veritabanına gönderme

Veriyi veritabanına geri itme alıştırması

csvkit ile Veritabanı ve SQL

Komut Satırında Veritabanı İşlemleri

Son bölümde, komut satırı ile diğer veri bilimi dilleri arasındaki bağı kuruyor ve birlikte nasıl çalışabileceklerini öğreniyoruz. Bir vaka çalışması olarak Python kullanarak, komut satırından Python çalıştırmayı, paket yöneticisi pip ile bağımlılık kurulumunu ve komut satırıyla baştan sona bir model hattı kurmayı öğreneceğiz.

Komut satırında Python

Komut satırında Python sürümünü bulma

Komut satırında Python betiği çalıştırma

pip ile Python paket kurulumu

pip'in yeteneklerini anlama

Python bağımlılıklarını yükleme

Bir Python modelini çalıştırma

cron ile veri işi otomasyonu

cron zamanlama sözdizimini anlama

crontab ile bir işi zamanlama

Komut satırında model yayına alma

Kurs özeti

Komut Satırında Veri Hattı

Spotify Song Attributes

Spotify Songs Popularity Ranking

Yoğun tempolu, teslim tarihleri sıkı bir dünyada yaşıyoruz. Bu yüzden çoğu zaman Visual Studio ve RStudio gibi alışık olduğumuz, kolay GUI arayüzlerine yöneliyoruz. Ancak komut satırında veri analizi öğrenmek için zaman ayırmak, uzun vadede harika bir yatırımdır; çünkü bizi daha güçlü ve üretken veri profesyonelleri yapar.

Bu kursta, basit, güçlü ve veriye özel komut satırı becerilerini pratik bir yaklaşımla öğreneceğiz. Halka açık Spotify veri kümelerini kullanarak veriyi indirmeyi, işlemeyi, temizlemeyi ve dönüştürmeyi—tamamını komut satırından—öğreneceğiz. Ayrıca komut satırında SQL veritabanı işlemleri gibi ileri teknikleri de göreceğiz. Son olarak, komut satırının gücünü Python ile birleştirerek bir tahminleme modelini otomatikleştiren bir veri hattı kuracağız.

Introduction to Shell

Intermediate Python

Intermediate SQL

Komut satırı becerileriyle veri indirin, işleyin ve dönüştürün; makine öğrenimi hattı dahil.

Kabukta Veri İşleme

Verileri indirmek, işlemek ve dönüştürmek için güçlü komut satırı becerileri öğrenin; makine öğrenmesi hattı dahil.

cron ile veri işi otomasyonu

Create Your Free Account