Ušetři si čas při provádění složitých a opakujících se úkolů. V této kapitole si nejprve osvěžíš znalosti běžných programů příkazové řádky a jejich argumentů a pak se rychle přesuneme do světa Bash skriptování. Vytvoříš jednoduché pipeline na příkazové řádce a přetvoříš je do podoby Bash skriptů. Dále rozšíříš své dovednosti a naučíš se pracovat se standardními proudy a předávat argumenty do svých Bash skriptů.

Úvod a opakování

Extrakce výsledků pomocí shellu

Prohledávání knihy v shellu

Tvůj první Bash skript

Jednoduchý Bash skript

Z příkazové řádky do Bash skriptu

Extrakce a úpravy pomocí Bash skriptů

Standardní proudy a argumenty

Použití argumentů v Bash skriptech

Použití argumentů s HR daty

Od příkazové řádky k Bash skriptu

Ovládni základní stavební kameny Bash skriptů – proměnné! V této kapitole se naučíš vytvářet základní řetězcové a číselné proměnné a provádět s nimi výpočty. Také odhalíš kouzlo shellu uvnitř shellu (shell-ception), které otevírá obrovské možnosti pro pokročilé skriptování.

Základní proměnné v Bashi

Používání proměnných v Bashi

Shell uvnitř shellu

Numerické proměnné v Bashi

Převod Fahrenheitů na Celsius

Extrakce dat ze souborů

Pole v Bashi

Vytvoření pole

Vytváření asociativních polí

Klimatické výpočty v Bashi

Proměnné v Bash skriptování

Život není vždy přímočarý a tvoje Bash skripty také nemusí být. V této kapitole posuneš své Bash skripty na vyšší úroveň díky řídicím strukturám. Naučíš se rozdíly mezi příkazy FOR, WHILE, IF a CASE a jak je používat ve svých skriptech. S těmito novými nástroji budeš připraven/a vytvářet pokročilejší Bash skripty s podmíněnou logikou.

Podmínky IF

# Extract Accuracy from first ARGV element
accuracy=$(grep ____ $1 | sed 's/.* //')

# Conditionally move into good_models folder
if [ $accuracy -____ 90 ]; then
    mv $1 ____/
____

# Conditionally move into bad_models folder
if [ $accuracy -lt 90 ]; then
    mv $1 ____/
fi


# Extract Accuracy from first ARGV element
accuracy=$(grep Accuracy $1 | sed 's/.* //')

# Conditionally move into good_models folder
if [ $accuracy -ge 90 ]; then
    mv $1 good_models/
fi

# Conditionally move into bad_models folder
if [ $accuracy -lt 90 ]; then
    mv $1 bad_models/
fi


Třídění výsledků modelů

# Create variable from first ARGV element
sfile=____

# Create an IF statement on sfile's contents
if ____ -q 'SRVM_' $sfile && grep -q '____' $sfile ; ____
	
    # Move file if matched
	mv $sfile ____/
        
fi

# Create variable from first ARGV element
sfile=$1

# Create an IF statement on sfile's contents
if grep -q 'SRVM_' $sfile && grep -q 'vpt' $sfile; then
	
    # Move file if matched
	mv $sfile good_logs/
    
fi

Přesun relevantních souborů

Cykly FOR a příkazy WHILE

# Use a FOR loop on files in directory
for file in ____/*.____
____  
    # Echo out each file
    echo ____
____


# Use a FOR loop on files in directory
for file in inherited_folder/*.R
do  
    # Echo out each file
    echo $file
done


Jednoduchá smyčka FOR

Oprava cyklu WHILE

# Create a FOR statement on files in directory
for file in robs_files/____
____  
    # Create IF statement using grep
    ____ grep -____ '____' $file ; ____
        # Move wanted files to to_keep/ folder
        ____ $file to_keep/
    fi
____


# Create a FOR statement on files in directory
for file in robs_files/*.py
do  
    # Create IF statement using grep
    if grep -q 'RandomForestClassifier' $file ; then
        # Move wanted files to to_keep/ folder
        mv $file to_keep/
    fi
done


Úklid adresáře

Příkazy CASE

# Create a CASE statement matching the first ARGV element
case ____ in
  # Match on all weekdays
  ____|____|____|____|____)
  echo "It is a Weekday!"____
  # Match on all weekend days
  ____|Sunday)
  echo "It is a Weekend!"____
  # Create a default
  ____) 
  echo "Not a day!"____
____


# Create a CASE statement matching the first ARGV element
case $1 in
  # Match on all weekdays
  Monday|Tuesday|Wednesday|Thursday|Friday)
  echo "It is a Weekday!";;
  # Match on all weekend days
  Saturday|Sunday)
  echo "It is a Weekend!";;
  # Create a default
  *) 
  echo "Not a day!";;
esac


Dny v týdnu pomocí CASE

# Use a FOR loop for each file in 'model_out/'
for file in _____/*
do
    # Create a CASE statement for each file's contents
    case $(____ $file) in
      # Match on tree and non-tree models
      *"____"*|*GBM*|*____*)
      mv $____ ____/ ;;
      *____*|*Logistic*)
      ____ $file ;;
      # Create a default
      ____) 
      echo "Unknown model in ____" ;;
    ____
done


# Use a FOR loop for each file in 'model_out'
for file in model_out/*
do
    # Create a CASE statement for each file's contents
    case $(cat $file) in
      # Match on tree and non-tree models
      *"Random Forest"*|*GBM*|*XGBoost*)
      mv $file tree_models/ ;;
      *KNN*|*Logistic*)
      rm $file ;;
      # Create a default
      *) 
      echo "Unknown model in $file" ;;
    esac
done


Přesouvání výsledků modelu pomocí CASE

Ukončení příkazu CASE

Řídicí struktury v Bash skriptování

Dej svým Bash skriptům novou sílu tím, že si vytvoříš užitečné funkce pro zpracování dat a proměnných. V této poslední kapitole se naučíš strukturu funkcí v Bash, jak pomocí funkcí automatizovat časté úkoly a jak naplánovat spouštění skriptů tak, aby běžely samy – bez jakéhokoli zásahu z tvé strany.

Základní funkce v Bash

Nahrávání výsledků modelů do cloudu

Zjisti aktuální den

Argumenty, návratové hodnoty a oblast platnosti

Kalkulačka procent

Funkce pro sportovní analytiku

Součet pole

Plánování skriptů pomocí Cronu

Analýza plánu crontabu

Tvorba cronjobů

Plánování cronjobů pomocí crontabu

Díky a shrnutí

Funkce a automatizace

Rob's Files

Soccer Scores

Model Results

Inherited Folder

New Hires

Hire Data

Model Output

Bash je stručný, rychlý a spolehlivý skriptovací jazyk pro práci s daty a soubory. Je to klíčová dovednost pro budování analytických pipeline v cloudu, oblíbená mezi uživateli Linuxu, kteří pracují s daty rozloženými napříč mnoha soubory.

V tomto kurzu tě provedeme základy Bash skriptování. Začneme představením struktury Bash skriptů, včetně předávání argumentů a zobrazování výsledků. Pak se pustíme do datových struktur, jako jsou proměnné a pole, a do řídicích struktur, včetně smyček a podmínek. Nakonec si vše procvičíš v praxi – vytvoříš vlastní Bash funkce a naplánuješ automatické spouštění skriptů pomocí cronu.

Introduction to Shell

Naučte se používat Bash pro automatizaci, tvorbu analytických kanálů v cloudu a práci s daty.

Úvod do Bash skriptování

Bash skriptování vám umožní vytvářet analytické pipeline v cloudu a pracovat s daty uloženými ve více souborech.

Ukončení příkazu CASE

Úvod do Bash skriptování

Interaktivní praktické cvičení