Les robots quand ils viennent sur mon site c’est disneyland, ils vont où ils veulent !

C’est en parlant de l’implémentation du REP avec un ami qui gère le site d’une agence de voyages qu’est sorti cette phrase…

Or sachant que les robots ne disposent que de ressources limitées à accorder au crawl de chaque site, ce serait dommage de leur permettre de « perdre du temps et de l’énergie » sur des pages inutiles en terme de référencement:

• Conditions générale de 3km
• Pages « partenaires » tout aussi longues
• Archives
• etc…

Ces pages ne sont pas forcément évidentes à identifier, mais heuresement Google analytics moyennant une petite scéance de torture pourrra grandement vous aider.
Je ne peux que vous conseiller la lecture de l’article suivant:
Google Analytics & SEO: comment mesurer les visites des robots sur votre site

C’est franchement bien pratique pour suivre de près le cheminement des robots et identifier quelles pages vous pourrez exclure des crawls.

Sur ce… Bonne année !

Commentaires