Cronjobs plannen met crontab

Als vaste data scientist is je gevraagd om een deel van een datapijplijn te automatiseren. Je gebruikt een van de cronjob-schema’s die je in een eerdere oefening hebt gemaakt.

Je gebruikt de ingebouwde crontab-functionaliteit van deze werkruimte om een datapijplijnscript, extract_data.sh, te plannen om elke dag om 2:30 ’s ochtends te draaien. Vroeg in de ochtend draaien bespaart flink op kosten dankzij goedkopere servercapaciteit.

Je komt terecht in de teksteditor nano, waar je een bestand opslaat met ctrl + o (druk op enter) en afsluit met ctrl + x. Nuttige Nano-documentatie staat hier.

Op elk moment kun je je browser vernieuwen om een schone werkruimte te krijgen en het opnieuw te proberen als je per ongeluk een fout maakt in de werkruimte.

Deze oefening maakt deel uit van de cursus

Introductie tot Bash-scripting

Cursus bekijken

Praktische interactieve oefening

Zet theorie om in actie met een van onze interactieve oefeningen.

Begin met trainen

Deze oefening maakt deel uit van de cursus

Introductie tot Bash-scripting

SkillTag.level.intermediateSkillTag.label

4.8+

Begin de cursus gratis

Save yourself time when performing complex repetitive tasks. You’ll begin this course by refreshing your knowledge of common command-line programs and arguments before quickly moving into the world of Bash scripting. You’ll create simple command-line pipelines and then transform these into Bash scripts. You’ll then boost your skills and learn about standard streams and feeding arguments to your Bash scripts.

Exercise 1: Introduction and refresher Exercise 2: Extracting scores with shell Exercise 3: Searching a book with shell Exercise 4: Your first Bash script Exercise 5: A simple Bash script Exercise 6: Shell pipelines to Bash scripts Exercise 7: Extract and edit using Bash scripts Exercise 8: Standard streams & arguments Exercise 9: Using arguments in Bash scripts Exercise 10: Using arguments with HR data

Master the bread and butter of Bash scripts—variables! In this chapter, you’ll learn how to create basic string and numeric variables, and perform calculations on these variables. You’ll also learn about the magic of a shell-within-a-shell (shell-ception), opening up huge opportunities for advanced scripting.

Exercise 1: Basic variables in Bash Exercise 2: Using variables in Bash Exercise 3: Shell within a shell Exercise 4: Numeric variables in Bash Exercise 5: Converting Fahrenheit to Celsius Exercise 6: Extracting data from files Exercise 7: Arrays in Bash Exercise 8: Creating an array Exercise 9: Creating associative arrays Exercise 10: Climate calculations in Bash

Life isn't always linear and neither should your Bash scripts. In this chapter, you’ll take your Bash scripts to the next level by learning control statements. You’ll learn the differences between FOR, WHILE, IF, and CASE statements and how to use them in your Bash scripts. Armed with these new tools, you’ll be ready to create more advanced Bash scripts with conditional logic.

Exercise 1: IF statements Exercise 2: Sorting model results Exercise 3: Moving relevant files Exercise 4: FOR loops & WHILE statements Exercise 5: A simple FOR loop Exercise 6: Correcting a WHILE statement Exercise 7: Cleaning up a directory Exercise 8: CASE statements Exercise 9: Days of the week with CASE Exercise 10: Moving model results with CASE Exercise 11: Finishing a CASE statement

Give your Bash scripts a powerful new addition by building useful functions to process data and variables. In this last chapter, you will learn the structure of functions in Bash, how to use functions to help automate frequent tasks, and program your scripts to run on schedule without needing to even lift a finger.

Exercise 1: Basisfuncties in Bash Exercise 2: Modelresultaten uploaden naar de cloud Exercise 3: Haal de huidige dag op Exercise 4: Argumenten, returnwaarden en scope Exercise 5: Een procenten-rekenhulp Exercise 6: Sportanalyses-functie Exercise 7: Een array optellen Exercise 8: Je scripts inplannen met Cron Exercise 9: Een crontab-schema analyseren Exercise 10: Cronjobs maken Exercise 11: Cronjobs plannen met crontab

Huidige oefening

Exercise 12: Bedankt en afronden