Je veux gratter toutes les pages et sous-pages d'un site Web (par gratter, je veux dire enregistrer tout le contenu en ligne dans des fichiers HTML locaux).
Quel est le meilleur utilitaire pour explorer toutes les pages? Idéalement, je voudrais préciser le nombre de couches profondes à gratter.
Vous avez deux options:
Vous pouvez utiliser l' wgetutilitaire de ligne de commande comme ceci:
wget -rl 10Remplacez le 10par le nombre de niveaux dans lesquels vous souhaitez rentrer.
Ou, vous pouvez utiliser SiteSucker . Une application graphique qui télécharge récursivement des sites Web. Vous pouvez également spécifier jusqu'où descendre pour recurse avec SiteSucker.
DeepVacuum
GUI pour wget, 15 $.
cocoawget
(gratuit)
la source