Google propose depuis la semaine dernière une nouvelle option dans ses indispensables Webmaster Tools, avec la possibilité de régler la vitesse d'exploration de votre site (le "crawl") par les robots de Google. Dans la rubrique "Settings" (dernièrement réaménagée), l'option "Crawl rate" permet de définir des paramètres personnalisés, en indiquant le nombre de requêtes par seconde et le nombre de secondes entre les requêtes effectuées sur votre site par Googlebot, le spider du moteur de recherche.
En règle générale, Google fera bien son travail et vous n'aurez pas à vouss soucier de cette donnée. Mais il se peut que vous ayiez, à un moment ou à un autre, un souci sur votre serveur et vous pourrez à ce moment-là, dire à Googlebot de "freiner ses hardeurs" pour vous libérer de la bande passante... La recommandation reste cependant de ne pas toucher à ce paramètre par défaut... A noter également que le moteur Live Search avait introduit une fonctionnalité assez proche dans son interface pour webmaster au mois d'avril dernier.
 Source de l'image : Google |
Plus d'infos :
http://www.google.com/webmasters/tools
Source(s) :
More control of Googlebot's crawl rate (google)
Articles connexes sur ce site :
- Donnez la cadence aux robots de Live Search (21 avril 2008)
- Google vous aide à trouver les backlinks cassés.. (15 octobre 2008)
- Les webmaster tools en widget sur iGoogle (4 mars 2008)
Les Google Webmaster Tools disponibles en API pour les hébergeurs de sites (15 juillet 2008)
- Google propose un gadget pour page d'erreur 404 (22 août 2008)
- La barre d'outils de Google remplace les pages 404, Matt Cutts explique pourquoi et comment (13 février 2008)
Toutes les pages du réseau Abondance pour la requête google webmaster tools...
Toutes les pages du Web pour la requête google webmaster tools...
