Oszczędź czas przy wykonywaniu złożonych, powtarzających się zadań. Rozdział zaczyna się od przypomnienia popularnych programów wiersza poleceń i ich argumentów, a następnie szybko przechodzi do świata skryptów Bash. Nauczysz się tworzyć proste potoki w wierszu poleceń, a potem przekształcać je w skrypty Bash. Poznasz też standardowe strumienie i sposoby przekazywania argumentów do skryptów.

Wprowadzenie i powtórzenie

Wyodrębnianie wyników za pomocą powłoki

Przeszukiwanie książki za pomocą powłoki

Twój pierwszy skrypt Bash

Prosty skrypt Bash

Potoki powłoki a skrypty Bash

Wyodrębnianie i edycja danych za pomocą skryptów Bash

Standardowe strumienie i argumenty

Używanie argumentów w skryptach Bash

Używanie argumentów z danymi HR

Od wiersza poleceń do skryptu Bash

Opanuj podstawy skryptów Bash – zmienne! W tym rozdziale nauczysz się tworzyć zmienne tekstowe i liczbowe oraz wykonywać na nich obliczenia. Odkryjesz też możliwości powłoki wewnątrz powłoki (shell-ception), co otwiera szerokie możliwości zaawansowanego skryptowania.

Podstawowe zmienne w Bashu

Używanie zmiennych w Bashu

Powłoka w powłoce

Zmienne numeryczne w Bashu

Przeliczanie stopni Fahrenheita na Celsjusza

Wyodrębnianie danych z plików

Tablice w Bashu

Tworzenie tablicy

Tworzenie tablic asocjacyjnych

Obliczenia klimatyczne w Bashu

Zmienne w skryptach Bash

Życie nie zawsze przebiega liniowo – twoje skrypty Bash też nie muszą. W tym rozdziale przejdziesz na wyższy poziom, ucząc się instrukcji sterujących. Poznasz różnice między instrukcjami FOR, WHILE, IF i CASE oraz sposoby ich stosowania w skryptach. Uzbrojony w te narzędzia, będziesz gotowy do tworzenia bardziej zaawansowanych skryptów z logiką warunkową.

Instrukcje IF

# Extract Accuracy from first ARGV element
accuracy=$(grep ____ $1 | sed 's/.* //')

# Conditionally move into good_models folder
if [ $accuracy -____ 90 ]; then
    mv $1 ____/
____

# Conditionally move into bad_models folder
if [ $accuracy -lt 90 ]; then
    mv $1 ____/
fi


# Extract Accuracy from first ARGV element
accuracy=$(grep Accuracy $1 | sed 's/.* //')

# Conditionally move into good_models folder
if [ $accuracy -ge 90 ]; then
    mv $1 good_models/
fi

# Conditionally move into bad_models folder
if [ $accuracy -lt 90 ]; then
    mv $1 bad_models/
fi


Sortowanie wyników modeli

# Create variable from first ARGV element
sfile=____

# Create an IF statement on sfile's contents
if ____ -q 'SRVM_' $sfile && grep -q '____' $sfile ; ____
	
    # Move file if matched
	mv $sfile ____/
        
fi

# Create variable from first ARGV element
sfile=$1

# Create an IF statement on sfile's contents
if grep -q 'SRVM_' $sfile && grep -q 'vpt' $sfile; then
	
    # Move file if matched
	mv $sfile good_logs/
    
fi

Przenoszenie odpowiednich plików

Pętle FOR i instrukcje WHILE

# Use a FOR loop on files in directory
for file in ____/*.____
____  
    # Echo out each file
    echo ____
____


# Use a FOR loop on files in directory
for file in inherited_folder/*.R
do  
    # Echo out each file
    echo $file
done


Prosta pętla FOR

Poprawianie pętli WHILE

# Create a FOR statement on files in directory
for file in robs_files/____
____  
    # Create IF statement using grep
    ____ grep -____ '____' $file ; ____
        # Move wanted files to to_keep/ folder
        ____ $file to_keep/
    fi
____


# Create a FOR statement on files in directory
for file in robs_files/*.py
do  
    # Create IF statement using grep
    if grep -q 'RandomForestClassifier' $file ; then
        # Move wanted files to to_keep/ folder
        mv $file to_keep/
    fi
done


Porządkowanie katalogu

Instrukcje CASE

# Create a CASE statement matching the first ARGV element
case ____ in
  # Match on all weekdays
  ____|____|____|____|____)
  echo "It is a Weekday!"____
  # Match on all weekend days
  ____|Sunday)
  echo "It is a Weekend!"____
  # Create a default
  ____) 
  echo "Not a day!"____
____


# Create a CASE statement matching the first ARGV element
case $1 in
  # Match on all weekdays
  Monday|Tuesday|Wednesday|Thursday|Friday)
  echo "It is a Weekday!";;
  # Match on all weekend days
  Saturday|Sunday)
  echo "It is a Weekend!";;
  # Create a default
  *) 
  echo "Not a day!";;
esac


Dni tygodnia z instrukcją CASE

# Use a FOR loop for each file in 'model_out/'
for file in _____/*
do
    # Create a CASE statement for each file's contents
    case $(____ $file) in
      # Match on tree and non-tree models
      *"____"*|*GBM*|*____*)
      mv $____ ____/ ;;
      *____*|*Logistic*)
      ____ $file ;;
      # Create a default
      ____) 
      echo "Unknown model in ____" ;;
    ____
done


# Use a FOR loop for each file in 'model_out'
for file in model_out/*
do
    # Create a CASE statement for each file's contents
    case $(cat $file) in
      # Match on tree and non-tree models
      *"Random Forest"*|*GBM*|*XGBoost*)
      mv $file tree_models/ ;;
      *KNN*|*Logistic*)
      rm $file ;;
      # Create a default
      *) 
      echo "Unknown model in $file" ;;
    esac
done


Przenoszenie wyników modeli za pomocą CASE

Kończenie instrukcji CASE

Instrukcje sterujące w skryptach Bash

Rozszerz możliwości swoich skryptów Bash, tworząc przydatne funkcje do przetwarzania danych i zmiennych. W tym ostatnim rozdziale poznasz strukturę funkcji w Bashu, dowiesz się, jak używać funkcji do automatyzacji częstych zadań, oraz nauczysz się planować uruchamianie skryptów według harmonogramu – bez żadnej ręcznej interwencji.

Podstawowe funkcje w Bashu

Przesyłanie wyników modelu do chmury

Pobierz aktualny dzień tygodnia

Argumenty, wartości zwracane i zakres

Kalkulator procentów

Funkcja do analizy sportowej

Sumowanie tablicy

Planowanie skryptów za pomocą Crona

Analiza harmonogramu crontab

Tworzenie zadań cron

Planowanie zadań cron za pomocą crontab

Podsumowanie kursu

Funkcje i automatyzacja

Rob's Files

Soccer Scores

Model Results

Inherited Folder

New Hires

Hire Data

Model Output

Bash to zwięzły, szybki i niezawodny język skryptowy do manipulowania danymi i plikami. To niezbędna umiejętność przy budowaniu potoków analitycznych w chmurze, ceniona przez użytkowników Linuksa pracujących z danymi rozproszonymi w wielu plikach.

W tym kursie przeprowadzimy cię przez podstawy pisania skryptów Bash. Zaczniemy od omówienia struktury skryptów Bash, w tym przekazywania argumentów i wyświetlania wyników. Następnie poznasz struktury danych, takie jak zmienne i tablice, a także instrukcje sterujące: pętle i warunki. Na koniec wykorzystasz zdobytą wiedzę w praktyce – tworząc własne funkcje Bash i planując automatyczne uruchamianie skryptów za pomocą crona.

Introduction to Shell

Poznaj użycie skryptów Bash do automatyzacji, tworzenia analiz w chmurze i pracy z danymi.

Wprowadzenie do skryptów Bash

Skrypty Bash pozwalają budować potoki analityczne w chmurze i pracować z danymi przechowywanymi w wielu plikach.

Kończenie instrukcji CASE

Wprowadzenie do skryptów Bash

Interaktywne ćwiczenie praktyczne