Créer un temps d’attente avec Wget
Pour les petits fichiers, imposer un temps d’attente obligatoire entre les téléchargements évite de surcharger le serveur avec trop de requêtes. Ici, nous allons utiliser l’option intégrée de wget pour définir un temps d’attente obligatoire (en secondes) entre chaque téléchargement de fichier figurant dans la liste d’URL.
Cet exercice fait partie du cours
<cours>Traitement des données en ligne de commande</cours>Instructions de l’exercice
- Créez une pause obligatoire de 1 seconde entre le téléchargement de tous les fichiers de
url_list.txt.
Exercice interactif pratique
Essayez cet exercice en complétant ce code d’exemple.
# View url_list.txt to verify content
cat url_list.txt
# Create a mandatory 1 second pause between downloading all files in url_list.txt
wget ___ -i url_list.txt
# Take a look at all files downloaded
ls