Avant d’être visibles, vos contenus doivent être découverts, explorés, puis compris par les moteurs. C’est tout l’enjeu du crawl et de l’indexation. Si Google ne passe pas, ou ne retient pas vos pages, elles n’existent tout simplement pas en ligne. Ici, on suit de près tout ce qui impacte cette étape cruciale : budget de crawl, erreurs techniques, nouveautés des bots, et bonnes pratiques pour rester dans les radars.
Quelques infos sur Google (et Bing parfois) et son moteur de recherche, glanées ici et là de façon officieuse ces derniers jours, avec au programme cette semaine quelques réponses à ces angoissantes questions : est-il judicieux de configurer la balise lastmod d'un...
Sponsorisé par Freelance Republik. Refondre un site, ce n’est pas seulement une histoire de design ou de CMS. C’est un chantier complexe où SEO, technique et expérience utilisateur doivent marcher main dans la main. Et trop souvent, les développeurs sont appelés une...
Quelques infos sur Google (et Bing parfois) et son moteur de recherche, glanées ici et là de façon officieuse ces derniers jours, avec au programme cette semaine quelques réponses à ces angoissantes questions : qu'est-ce qu'une modification significative d'un contenu...
Quelques infos sur Google (et Bing parfois) et son moteur de recherche, glanées ici et là de façon officieuse ces derniers jours, avec au programme cette semaine quelques réponses à ces angoissantes questions : Est-ce une bonne idée de modifier dynamiquement un...
Quelques infos sur Google (et Bing parfois) et son moteur de recherche, glanées ici et là de façon officieuse ces derniers jours, avec au programme cette semaine quelques réponses à ces angoissantes questions : quel est l'impact d'un nombre de requêtes trop élevé sur...
Google a mis à jour ses recommandations sur le budget de crawl, incitant les grands sites à vérifier la présence de tous les liens sur leurs versions mobiles. Cette mise à jour impacte particulièrement les grands sites aux nombreuses pages, dont la visibilité dépend...
Le Search Marketing, pour (enfin) être trouvé.
FormaSEO, les formations e-learning d’Abondance. SEO, Content marketing, Automatisation, Analytics, YouTube… Découvrez tous les aspects du Search en vidéo !
Quelques infos sur Google (et Bing parfois) et son moteur de recherche, glanées ici et là de façon officieuse ces derniers jours, avec au programme cette semaine quelques réponses à ces angoissantes questions : Que faire de vos sous-domaines AMP obsolètes ? Que faire...
Dans une récente étude réalisée entre le 12 septembre et le 11 octobre 2024, auprès de 282 référenceurs, SEOFOMO nous livre un petit état des lieux du SEO technique en 2024. Quel est le profil type des professionnels spécialisés ? Quelles sont leurs pratiques et les...
Quelques infos sur Google (et Bing parfois) et son moteur de recherche, glanées ici et là de façon officieuse ces derniers jours, avec au programme cette semaine quelques réponses à ces angoissantes questions : quels champs du fichier robots.txt que Google prend-il en...
Google a revu en profondeur sa documentation sur les crawlers, simplifiant la page principale et ajoutant 3 nouvelles pages plus détaillées. Ce changement vise à améliorer l'accès à des informations techniques précises. On vous explique les changements concrets...
Quelques infos sur Google (et Bing parfois) et son moteur de recherche, glanées ici et là de façon officieuse ces derniers jours, avec au programme cette semaine quelques réponses à ces angoissantes questions : faut-il considérer le spam core comme un indicateur...
Quelques infos sur Google (et Bing parfois) et son moteur de recherche, glanées ici et là de façon officieuse ces derniers jours, avec au programme cette semaine quelques réponses à ces angoissantes questions : Pourquoi certaines pages ne sont-elles pas indexées par...
Quelques infos sur Google (et Bing parfois) et son moteur de recherche, glanées ici et là de façon officieuse ces derniers jours, avec au programme cette semaine quelques réponses à ces angoissantes questions : Googlebot est-il vraiment conçu pour suivre les liens ?...
Quelques infos sur Google (et Bing parfois) et son moteur de recherche, glanées ici et là de façon officieuse ces derniers jours, avec au programme cette semaine quelques réponses à ces angoissantes questions : est-il judicieux de faire de ses URLs mobiles ses URLs...
Quelques infos sur Google (et Bing parfois) et son moteur de recherche, glanées ici et là de façon officieuse ces derniers jours, avec au programme cette semaine quelques réponses à ces angoissantes questions : une demande d'indexation peut-elle impacter une...
Google remet en question une croyance de longue date concernant l'emplacement des fichiers robots.txt (qui fêtent leurs 30 ans cette année). Gary Illyes, analyste chez Google, a révélé que ces fichiers peuvent être centralisés sur des CDN, offrant une nouvelle...
Quelques infos sur Google (et Bing parfois) et son moteur de recherche, glanées ici et là de façon officieuse ces derniers jours. Au programme, cette semaine : faut-il abandonner la version desktop de votre site ? Pourquoi le signal lastmod du sitemap est-il si...
Google vient d’annoncer l’indexation des fichiers EPUB dans son moteur de recherche. Ce nouveau type de fichier pris en charge s'ajoute à la liste déjà longue des fichiers que Google peut indexer, offrant de nouvelles perspectives pour les éditeurs. Ce qu'il faut...
Avant d’espérer apparaître dans les résultats de Google, vos pages doivent être découvertes, explorées (crawlées) et ajoutées à l’index. Sans cela, elles restent invisibles pour les internautes. Le moteur a ses règles et ses limites. Respecter ses attentes techniques et éditoriales est donc essentiel pour exister en ligne.
Certains comportements ou configurations peuvent empêcher totalement Googlebot d’accéder à vos pages, volontairement ou non :
Certaines erreurs ou techniques nuisent à la découverte et à l’indexation efficace :
Google recommande de faciliter l’exploration et la compréhension de vos contenus :
Le crawl et l’indexation ne sont pas des sujets « techniques secondaires » : ce sont les bases de toute stratégie SEO. Voici les fondamentaux pour rester visible :
Le crawl est le processus par lequel les moteurs de recherche explorent le web à l’aide de robots (comme Googlebot) qui parcourent les pages en suivant les liens pour découvrir de nouveaux contenus ou détecter des mises à jour. Une fois les pages explorées, vient l’étape de l’indexation, qui consiste à analyser et stocker ces pages dans l’index du moteur si elles sont jugées pertinentes et accessibles. Seules les pages indexées peuvent ensuite apparaître dans les résultats de recherche.
[Article reprenant en partie des données issues d'un communiqué de presse envoyé par la société Verticrawl]Depuis 1999, Verticrawl propose des...
Les "Webmasters Tools" de Google proposent depuis cette semaine un nouvel outil avec un générateur de fichier "robots.txt" : vous spécifiez ce qu'il...
Le blog Google Operating System a publié mardi un post intitulé Google Artificially Promotes Recent Web Pages selon lequel, selon lui, Google...
L'ACAP (Automated Content Access Protocol) a proposé fin novembre un nouveau standard d'indications sur la façon dont les moteurs de recherche...
Un internaute vient de découvrir que Google prenait en compte une directive nommée "noindex" lorsqu'elle était insérée dans le fichier "robots.txt"...
Une étude menée par la Pennsylvania State University, et nommée "Determining Bias to Search Engines from Robots.txt", sur les fichiers "robots.txt"...
Certains se sont dernièrement ému du fait que le site d'Al Gore avait disparu de l'index de Google. Difficile pourtant de penser qu'Al Gore, ancien...
Cela fait plusieurs jours que de nombreux blogs - et celui d'Abondance dans les premiers - se sont fait l'écho de changements dans la durée...
Comme tous les vendredis, nous vous présentons ci-dessous une petite sélection de nouveaux moteurs sortis il y a peu et d'outils qui nous ont été...
L'outil Google Sitemaps offre une fonctionnalité bien utile depuis aujourd'hui, avec un analyseur de fichier robots.txt. Dans l'interface...
Peut-être connaissiez-vous déjà le site "Robostats" (anciennement "Googlestats") qui vous envoit des e-mails chaque fois qu'un robot d'un moteur...
BEA Conseil, société éditrice du logiciel KB Crawl, a présenté hier la deuxième génération de son logiciel de veille sur Internet, KB Crawl 2.0. KB...
Depuis qu'il a enlevé ses bannières publicitaires et ses pop-ups incessants en juillet 2002, le moteur de recherche Webcrawler vient d'annoncer...
A notre question en ligne des quinze derniers jours ("Utilisez-vous un fichier Robots.txt pour votre site web ?"), les internautes ayant participé...
La société Infospace, qui gère aux Etats-Unis les sites d'Excite, Webcrawler, Metacrawler et Dogpile, vient d'annoncer qu'il allait afficher les...
He oui, Excite et Webcrawler existent encore. Leur nouveau propriétaire, Infospace, vient d'installer sur ces deux sites un métamoteur web qui tente...
Selon le site Research Buzz, Google serait en train de tester des technologies qui lui permettraient d'indexer de façon quotidienne les pages de son...
Le moteur de recherche Webcrawler a changé de look et devient un "simple" moteur, très dépouillé, qui propose à une interrogation exactement les...
Sur le site Abondance, nous essayons, dans la mesure du possible, de vous expliquer comment faire en sorte que vos pages soient indexées au mieux...
MetaCrawler, le métamoteur de Go2net, se relance avec un nouveau lifting et des nouvelles fonctionnalités : possibilités de recherche sur les sons,...
✓ Analyses approfondies ✓ Tendances et techniques innovantes ✓ Retour d’expérience de consultants seniors
Explorez les sites pour identifier et corriger les erreurs techniques SEO
Évaluation : 4,9 (132 avis)
Pour qui ? : les spécialistes SEO, les agences, les équipes marketing et les créateurs de contenu
Prix : Freemium
Un crawler avancé pour analyser la performance technique de votre site
Évaluation : 3,8 (4 avis)
Pour qui ? : les spécialistes SEO, les agences, les équipes marketing et les créateurs de contenu
Prix : Freemium
Améliorez l’indexabilité de vos pages avec cet outil de crawling avancé
Évaluation : 4,3 (4 avis)
Pour qui ? : les spécialistes SEO, les agences, les équipes marketing et les créateurs de contenu
Prix : Prix sur devis
ActuMoteurs : rejoignez nos 20 000 abonnés et recevez, chaque semaine, tous nos articles dans votre boite mail !
Les données transmises par le biais de ce formulaire sont uniquement destinées à Abondance. Elles ne seront en aucun cas cédées à des tiers. Vous pouvez vous désabonner à tout moment en cliquant sur les liens de désinscriptions présents dans chacun de nos emails. Pour plus d’informations, vous pouvez consulter l’intégralité de notre politique de traitement de vos données personnelles.