Impostare un tempo di attesa con Wget
Per scaricare file più piccoli, imporre un tempo di attesa obbligatorio tra i download evita di sovraccaricare il server con troppe richieste. Qui useremo l'opzione integrata di wget per creare un tempo di attesa obbligatorio (in secondi) tra il download di ciascun file presente nel file con l'elenco degli URL.
Questo esercizio fa parte del corso
Elaborazione dei dati in Shell
Istruzioni dell'esercizio
- Crea una pausa obbligatoria di 1 secondo tra il download di tutti i file in
url_list.txt.
esercizio interattivo pratico
Prova questo esercizio completando questo codice di esempio.
# View url_list.txt to verify content
cat url_list.txt
# Create a mandatory 1 second pause between downloading all files in url_list.txt
wget ___ -i url_list.txt
# Take a look at all files downloaded
ls