Bon outil pour explorer mon site et m'aider à trouver des liens morts et des fichiers non liés [fermé]

21

J'ai un site hérité assez grand avec littéralement des milliers de PDF qui représentent parfois une base de données, mais ne sont souvent que des liens sur la page, et sont stockés dans la plupart des répertoires du site.

J'ai écrit un robot php pour suivre tous les liens sur mon site, puis je compare cela à un vidage de la structure du répertoire, mais y a-t-il quelque chose de plus facile?

site-maintenance web-crawlers dead-links MrChrister
la source
Voir aussi webmasters.stackexchange.com/questions/13310/… qui pose également des questions sur la vérification orthographique.
James Skemp

Réponses:

15

J'ai utilisé Link Sleuth de Xenu . Cela fonctionne plutôt bien, assurez-vous simplement de ne pas faire de DOS vous-même!

plntxt
la source
1
Cochez l'option «Fichiers orphelins» dans les options et il vous demandera une connexion ftp à votre site.
pelms
Est-ce que cela gère également les sites auxquels vous devez vous connecter pour accéder à la page?
Donny V.
@Jim Comment puis-je voir sur quelle page se trouve le lien brisé?
Rob
Une fois l'analyse terminée, un rapport vous fournira les informations. Selon la taille du site et le nombre de liens rompus, il peut être difficile à analyser. J'ajuste généralement les options de rapport avant l'analyse, et j'ouvre le rapport sous forme de fichier texte (car c'est .htm) et je supprime les éléments qui ne sont pas pertinents pour le rendre plus gérable. J'espère que cela t'aides.
plntxt
6

Si vous utilisez Windows 7, le meilleur outil est le SEO Toolkit 1.0 d'IIS7. C'est gratuit et vous pouvez le télécharger gratuitement.

L'outil analysera n'importe quel site et vous indiquera où se trouvent tous les liens morts, quelles pages prennent trop de temps à charger, quelles pages ont des titres manquants, des titres en double, de même pour les mots-clés et les descriptions, et quelles pages ont rompu HTML.

Ben Hoffman
la source
1
Je l'ai utilisé personnellement, et il est excellent pour la numérisation et bien sûr le référencement, mais la vérification FTP dans Xenu limite juste cela.
MrChrister
1

Je suis un grand fan de linklint pour la vérification de liens de grands sites statiques, si vous avez une ligne de commande unix (que j'ai utilisée sur linux, MacOS et FreeBSD). Voir leur site pour les instructions d'installation. Une fois installé, je crée un fichier appelé check.llet fais:

linklint @check.ll

Voici à quoi ressemble mon fichier check.ll

# linklint
-doc .
-delay 0
-http
-htmlonly
-limit 4000
-net
-host www.example.com
-timeout 10

Cela analyse www.example.comet génère des fichiers HTML avec des rapports croisés pour ce qui est cassé, manquant, etc.

artlung
la source
1

Il existe plusieurs produits de Microsys , en particulier leur générateur de sitemap A1 et l' analyseur de site Web A1 qui exploreront votre site Web et rapporteront tout ce que vous pouvez imaginer à ce sujet.

Cela inclut des liens brisés, mais aussi une vue sous forme de tableau de toutes vos pages afin que vous puissiez comparer des éléments tels que des balises <title> et des méta-descriptions identiques, des liens nofollow, des méta-noindex sur les pages Web et de nombreuses maladies qui ont juste besoin d'un œil aiguisé et une main rapide à réparer.

Evgeny
la source
1

Link Examiner est aussi un très bon logiciel gratuit pour vos besoins.

Foncé
la source