Identifier les erreurs de crawl

Pour un bon référencement, il est nécessaire que les robots des moteurs de recherche puissent naviguer sans problème à l’intérieur du site. Il faut éviter à tout prix les erreurs 4xx, ou les mauvaises redirections (302 au lieu de 301).

Heureusement, pour nous aider dans la quête d’un paradis pour les robots, il existe des outils :

Xenu’s Link Sleuth

Xenu's Link Sleuth

Carte d’identité de Xenu’s Link Sleuth

Xenu’s Link Sleuth est Freeware (gratuit) qui fonctionne sur toutes les versions de windows. C’est un robot d’exploration de site, qui, une fois qu’on lui a donné une URL, va explorer l’ensemble du site et fournir un rapport.

Comment ça marche ?

Le programme suit les liens des pages, et vérifie leurs liens également. Il est donc possible de vérifier la totalité d’un site en une seule fois.

Xenu affiche une liste  d’URL qui peut être triée selon différents critères (Adresse, statut, type, taille, date, niveau…)

On y trouvera facilement toutes les erreurs 404 et redirections 3xx du site internet.

Où télécharger Xenu’s Link Sleuth ?

Sur le site officiel : http://home.snafu.de/tilman/xenulink.html

LinkExaminer

LinkExam

Carte d’identité de LinkExaminer

LinkExaminer est un Freeware (gratuit) qui fonctionne sur Windows 200, XP, Vista et Seven. Il permet de vérifier les liens d’un site.

Comment ça marche ?

AnalogX LinkExaminer est à la base un vérificateur de liens, il parcourt toutes les pages (à condition de l’avoir correctement paramétré) et analyse le code HTML pour en extraire les liens existants sur la page.

Il peut aussi effectuer d’autres contrôles: des tâches simples, comme l’extraction du titre de la page,  l’analyse SEO,  mais aussi des tâches plus avancées comme identifier les pages similaires. Une fois l’analyse terminée, les résultats sont affichés dans une interface graphique. Vous pouvez les exporter dans de nombreux formats, y compris en CSV et XML. Il dispose également d’un moteur basé sur un modèle de génération de rapports HTML, qui vous permet de générer un rapport de manière totalement personnalisée

Où télécharger LinkExaminer ?

Sur le site officiel: http://www.analogx.com/contents/download/Network/lnkexam/Freeware.htm