Cela fait plusieurs jours que de nombreux blogs - et celui d'Abondance dans les premiers - se sont fait l'écho de changements dans la durée d'indexation des robots de Google, qui se sont fait dernièrement très rapides pour mettre à jour les informations auxquelles ils accèdent. On est proche, dans certains cas, d'une indexation en temps réel...

Cela peut paraître une grande nouveauté, un réel progrès que cette vitesse d'indexation record, et pourtant, le phénomène n'est pas récent, loin de là... Certains dinosaures, parmi vous, se souviennent peut-être d'Infoseek. Il a été l'un des premiers moteurs de recherche sur le Web (si ce n'est le premier digne de ce nom) en janvier 1994 (eh oui, il y a plus de 13 ans...), créé par Steven Kirsch avant d'être vendu à Disney pour devenir un portail un peu quelconque nommé Go.com.

Infoseek, à ses débuts, prenait en compte de façon immédiate les sites qui lui étaient soumis au travers de son formulaire "Add url".En d'autres termes, vous soumettiez un site au moteur au travers du formulaire fourni en ligne et, quelques minutes plus tard, le site était indexé et "trouvable" au travers d'une requête... On en voit d'ailleurs encore la trace ("Submit a Web page to Infoseek's index by typing the URL in the space provided. New pages or updates to pages previously in the index are searchable within minutes. Dead URLs reported through Add URL are deleted from the index...") grâce au service Wayback Machine...

Je me souviens très bien que cette fonction avait posé de gros soucis de spam au moteur de recherche. Tous les référenceurs de l'époque s'en étaient donné à cœur joie : ils optimisaient une page, la soumettaient, vérifiaient son positionnement, et s'ils n'étaient pas satisfaits de ce dernier, ils réoptimisaient la pge, la resoumettaient, revérifiaient, etc. Jusqu'à atteindre les première positions. L'indexation temps réel permettait ainsi d'obtenir de bons résultats en quelques heures de travail (d'autant plus que les moteurs, à cette époque-là, n'étaient pas armé contre le spam comme ceux d'aujourd'hui...).

Le même type de problème peut-il arriver à Google du fait de son indexation rapide, constatée ces temps derniers ? A mon avis, c'est possible et le moteur de recherche devra y prendre garde même si, on peut s'en douter, il a largement réfléchi au problème avant de lancer ses spiders à l'abordage instantané du Web !!