Blog OSEOX : Marketing, Trafic et E-commmerce

RSS referencement
Ajouter à netvibes
Ajouter à google

Oseox c'est aussi plus de 500 formations web, un forum et des services gratuits.

Référencement

Vitesse de crawl plus rapide via Google Webmaster Tools : Mouai

Aurélien Bardon

09 décembre 2008

Vitesse de crawl plus rapide via Google Webmaster Tools : Mouai Il est possible via l'interface Google Webmaster Tools de régler la vitesse de crawl du robot Google. Cela fonctionne-t-il vraiment ? Et si oui, l'impact est-il significatif ?

Par Aurélien Bardon,

Ce billet est une traduction de cet article

Récemment, j'étais en train de travailler pour un client et j'ai décidé de me livrer à une petite expérimentation, tout simplement parce que quelques fois... je n'ai rien à faire de mieux. Je voulais savoir si le fait de modifier la vitesse du crawl dans Google Webmaster Tools changeait vraiment quelque chose. Une partie de moi pensait que le but pour Google n'était que de faire croire aux gens que leurs robots viendraient plus souvent alors qu'une autre partie voulait tout simplement faire confiance à Google.

J'ai rapidement écris un script qui stocke toutes les informations sur le user agent, les pages visitées ainsi que les dates de visites dans une base de données. Je l'ai laissé tourner pendant 200 jours. Pendant 90 jours, j'avais activé l'option de vitesse du crawl "Plus rapide", le reste du temps, l'option cochée était "Normal". J'ai également tracké le temps entre la mise en ligne d'une nouvel article sur le blog de mon client et la première visite du robot Google.

Concrètement, j'ai tracké GoogleBot pendant 55 jours sur "Normal" puis 90 jours sur "Plus rapide" et enfin une nouvelle fois 55 jours sur "Normal".

Voici quelques information avant de nous plonger dans les données que j'ai collectées. Le site avait 45 pages en cache et avait plus d'une année d'ancienneté au moment où j'ai démarré cette expérience. Les nouveaux articles sur le blog furent ajoutés au rythme de 2 ou 3 par semaine, il était donc ajouté du "contenu frais" au site. Ce site se positionne bien sur sa marque ainsi que sur quelques mots clés en rapport avec sa thématique.

Au cours de cette expérience, plus de 80 articles furent donc ajoutés sur le site. Pendant que la vitesse du crawl était en "Normal" cela prenait en moyenne 3,4 jours avant que Google visite la première visite de Google sur une nouvelle page. Lorsque la vitesse était configurée sur "Plus rapide", cela prenait en moyenne 2,9.

Note : J'ai n'ai pas pris en compte le temps entre la mise en ligne et la mise en cache de la page mais bien le temps entre la mise en ligne et la première visite de GoogleBot.

Visites de GoogleBot pendant 90 jours avec l'option "Plus rapide"

Visites de GoogleBot pendant 90 jours avec l'option Plus rapide

Visites de GoogleBot pendant 110 jours avec l'option "Normal"

Visites de GoogleBot pendant 110 jours avec l'option Normal

Lorsque la vitesse de crawl était fixée sur "Normal", Google visitait en moyenne le site 6 fois par jour et surtout le Mardi, le Vendredi et le Dimanche.

Lorsque la vitesse de crawl était fixée sur "Plus rapide", Google visitait en moyenne le site 7,5 fois par jour et surtout le Mercredi, le Jeudi et le Samedi.

Après 90 jours, il a visité 135 pages de plus que si l'option "Normal" avait été cochée.

Comparaison du nombre de pages crawlés par GoogleBot en mode plus rapide et mode normal

Si vous regardez sur le graphique ci-dessus, vous verrez qu'il y a une légère amélioration lorsque le crawl est configuré sur "Plus rapide" mais seulement pour une partie des 90 jours.

Après avoir vu les résultats, j'en suis arrivé à la conclusion que le fait de changer la vitesse d'indexation dans Google Webmaster Tools ne changait en fait quasiment rien au comportement du robot.

NDT : Google vient de mettre à jour Google Webmaster Tools est a changé l'option de vitesse de crawl...

Formez-vous avec notre newsletter professionnelle (gratuite)


(En cadeau, un guide sur le Référencement de plus de 30 pages)

Editeur du portail Oseox.fr, Aurélien Bardon est expert en création de trafic. Après avoir travaillé en agence et chez l'annonceur, aussi bien pour des petites sociétés que pour de grands comptes, il fonde en 2009 l'agence web Aseox.

suivre Aurélien Bardon sur twitter

Affichez les commentaires

N'oubliez pas de vous abonner au flux

S'inscrire à la newsletter (info exclusive)

Recevoir 80 tests Référencement ?
(PDF gratuit de 31 pages)
(Désabonnement en 1 clic)
oseox Sitemap SEO
oseox Monitoring
E-commerce

E-commerçants ? Vous recherchez un partenaire ?

18/03/2015 par Aurélien Bardon : 14246 lectures.

chapeau bas de bloc
Référencement

Code promo SEOCampus 2015

06/03/2015 par Aurélien Bardon : 13072 lectures.

chapeau bas de bloc
Développement Web

CDI Full Stack Developer

18/12/2014 par Aurélien Bardon : 16380 lectures.

chapeau bas de bloc
Référencement

Compte rendu du SEOcamp'US de Lille 2014

09/12/2014 par Aurélien Bardon : 14297 lectures.

chapeau bas de bloc
Référencement

Apéro Référencement à Lille le 5 décembre

02/12/2014 par Aurélien Bardon : 12314 lectures.

chapeau bas de bloc
Internet

Interview de Julien Ringard

26/11/2014 par Aurélien Bardon : 11500 lectures.

chapeau bas de bloc
Internet

Interview de Mounira Hamdi, spécialiste SMO

19/11/2014 par Aurélien Bardon : 14587 lectures.

chapeau bas de bloc
Internet

Le programme du SEOCAMP'US de Lille dévoilé

18/11/2014 par Aurélien Bardon : 11969 lectures.

chapeau bas de bloc
Internet

Interview de Nicolas Gallet

17/11/2014 par Aurélien Bardon : 10443 lectures.

chapeau bas de bloc
Internet

Interview de Elie Sloïm

14/11/2014 par Aurélien Bardon : 12843 lectures.

chapeau bas de bloc

Forum Marketing

Oseox sur Google Plus Oseox sur Twitter Oseox sur Facebook RSS Blog Concours