Vous êtes-vous déjà demandé s’il existait un moyen de télécharger un site Web sans navigateur Web ? Tu es chanceux. Avec la puissance de la ligne de commande Linux, tout est possible. Il existe plusieurs méthodes pour effectuer cette tâche, mais nous nous concentrons sur wget dans cet article.
Contenu
Qu’est-ce que wget ?
wget est un utilitaire de ligne de commande GNU permettant de récupérer du contenu à partir de serveurs Web. En tant que téléchargeur, wget est très puissant en soi. wget est capable de fonctionner avec plusieurs protocoles, tels que HTTP, HTTPS et FTP. Les autres fonctionnalités de l’utilitaire wget incluent :
Pourquoi wget ?
Bien qu’il existe une multitude d’outils pouvant effectuer des activités sur le site Web, wget permet une large portée. Il donne à l’utilisateur la possibilité de fonctionner sans navigateur Web en :
wget est également intégré à la plupart des distributions Linux, il est donc disponible dès le début et aucune autre installation n’est requise.
wget Notions de base
Démarrer avec wget est assez simple. Tout d’abord, ouvrez un terminal Linux.
Une fois qu’une fenêtre de terminal est ouverte, vous pouvez exécuter wget comme indiqué ci-dessous :
Remplacez « URL » par l’URL exacte du site Web.
Pour reprendre un fichier partiellement téléchargé, utilisez un commutateur -c dans votre commande comme suit :
Pour rendre votre téléchargement wget silencieux, ajoutez le commutateur -q à votre commande wget initiale :
Si vous n’êtes pas sûr de la bonne utilisation des options dans wget, utilisez ce qui suit :
Outre les sites Web, vous pouvez également télécharger un fichier à l’aide de wget. Par exemple:
Il saisirait simplement le fichier et l’enregistrerait dans le répertoire actuel.
Si vous souhaitez enregistrer sous un nom de fichier différent ou un emplacement différent, utilisez l’indicateur -O.
Options FTP
Comme indiqué précédemment, wget prend également en charge FTP. Si vous spécifiez simplement un site FTP :
wget supposera que vous voulez une connexion anonyme. Vous pouvez également spécifier manuellement des éléments tels que le nom d’utilisateur et le mot de passe avec les indicateurs suivants :
Délais d’attente, nouvelles tentatives et échecs de téléchargement
Enfin, wget est livré avec plusieurs options relatives aux problèmes de connexion au serveur et aux délais d’attente. Bien entendu, tous les échecs ne peuvent pas être traités, mais les indicateurs suivants sont tous destinés à aider à résoudre les problèmes de serveur :
Qui utiliserait wget ?
En lisant cet article, vous pensez peut-être : « Cela semble compliqué et bien plus difficile que d’utiliser un navigateur Web », mais n’importe qui peut trouver une utilité à cet utilitaire, que ce soit en tant qu’administrateur système ou programmeur. Vous trouverez ci-dessous deux exemples de la façon dont j’utilise cette commande tout au long de ma journée, mon rôle changeant parfois.
Cela facilite mon travail en tant que chercheur en sécurité car je peux programmer cette commande pour télécharger plusieurs sites Web à la fois. Je peux le faire en créant un fichier texte (à l’aide de n’importe quel éditeur de texte) qui contient un certain nombre d’URL dans une liste (une URL par ligne). En exécutant la commande ci-dessous avec le commutateur -i, wget téléchargera chaque site Web de la liste.
En tant qu’administrateur système, je peux facilement obtenir des documents à partir d’emplacements protégés par mot de passe. Cela peut ne pas vous aider aussi hors ligne, mais en exécutant wget allow, cela vous permet d’ajouter des informations d’identification à un site.
Voilà! Était-ce aussi difficile que vous le pensiez ? Pouvoir automatiser vos actions avec wget vous fera gagner du temps et vous donnera également la possibilité de travailler hors ligne. Qu’avez-vous à perdre?
Laissez un commentaire ci-dessous et dites-nous si vous avez trouvé cela utile.
Cet article est-il utile ? Oui Non
