Les spiders (les « araignées » – également appelés crawlers) sont des petits logiciels robots qui scrutent les sites web et les indexent dans les répertoires des moteurs de recherche. Le spider de Google se nomme GoogleBot. Cela de Yahoo se nomme YahooBot. Etc.
Ils voyagent de site en site en indexant toutes les pages et en suivant tous les liens qu’ils trouvent.
Voici pourquoi et comment savoir à quoi ressemble votre site quand un spider le regarde :
Montre moi ton site pour que je vois comment l’indexer…
Les spiders sont des obsédés « textuels »
Les spiders sont des obsédés textuels et ils affectionnent particulièrement les sites qui ont beaucoup de text appeal.
Comprenez par là que les spiders des moteurs de recherche ne s’intéressent qu’au texte de vos pages et à rien d’autre. Les images, les vidéos, les animations, etc., n’ont strictement aucune importance pour eux.
De même, nous savons qu’un moteur de recherche donne plus d’importance aux mots qui se trouvent au haut d’une page web par rapport à ceux qui se trouvent en bas.
Selon Olivier Andrieu, spécialiste du référencement, les 30 à 50 premiers termes de votre page sont primordiaux pour le référencement de celle-ci. Vos mots-clés principaux doivent donc impérativement se trouver le plus haut possible.
Toutefois, nous ne percevons pas vraiment nos sites de la même façon que les voient les spiders avec leurs gros yeux d’araignée.
Il est donc important de savoir à quoi ressemble votre site quand une araignée le regarde. Voici plusieurs techniques :
Utiliser le cache de Google
La façon la plus facile pour visualiser votre site comme un spider le voit est d’utiliser le cache de Google.
Pour cela, faites une recherche dans Google pour que votre site apparaisse dans les résultats de recherche. Puis cliquez sur le lien « En cache » comme indiqué ci-dessous :
Cliquez sur le lien « En cache » dans les résultats de recherche
Cela va avoir pour effet d’ouvrir votre site en affichant tout en haut l’encadré du Cache Google. Cliquez sur le lien « Version en texte seul », comme ci-dessous :
Le Cache de goole
Vous obtenez alors une version texte de votre site, proche de la façon dont le voient les spiders de Google.
Utiliser le navigateur Lynx Browser
Lynx Browser est un navigateur web première génération, qui fonctionne uniquement en mode texte. Il ne tient donc pas compte de la composante graphique, de la mise en page, des vidéos, du flash, des bannières, etc.
La façon dont un site apparait dans ce navigateur est donc très proche de la façon dont un spider le voit.
Tout d’abord, téléchargez Lynx Browser et installez-le.
Une fois installé, ouvrez-le en double-cliquant sur son raccourci clavier. Une fenêtre noire avec peu de texte s’ouvre. Elle devrait ressembler à :
Le navigateur texte Lynx Browser
Lynx Browser est un navigateur texte, c’est à dire qu’il n’utilise pas la souris. Tout se fait au clavier.
Pour commencer votre navigation, appuyez sur la touche G de votre clavier, puis écrivez l’url de votre site, comme ci-dessous :
Appuyez sur G et écrivez l’url de votre site
Puis appuyez sur le touche ENTRÉE de votre clavier pour ouvrir votre site dans Lynx.
Votre site apparait alors en mode TEXTE, très proche de la façon dont le voient les spiders des moteurs de recherche.
Virtuose-Marketing sous Lynx
Toutefois, le problème avec le Cache de Google et Lynx Browser, c’est qu’ils tiennent compte des tableaux et des « blocs de textes » alors qu’il semble que les spiders n’en tiennent pas compte et ont une vue plus « linéaire » de votre site.
Pour avoir une vision plus proche encore de la façon dont les spiders voient votre site, vous pouvez utiliser :
Les simulateurs de spiders
Voici une petite liste non exhaustive de simulateurs de spiders :
- www.docteur-seo.com/simulation-spider.php
- www.yatooweb.com/referencement/simuler-robot.php
- www.seochat.com/seo-tools/spider-simulator
Comme vous le verrez, ces simulateurs vous donnent des informations difficilement ingérables, car elles ne ressemblent qu’à un gros bloc de texte.
Toutefois, ils offrent certainement la vision de votre site la plus proche de celle d’un spider.