Services : Blog Forum Flux
Formation Trafic : Référencement Liens sponsorisés Affiliation Ecommerce Nom de domaine E-réputation Marketing Mobile Black Hat Outils Referencement
Formation Technique : Performance Web Html Css Sql Curl Asp Dotnet Php Ajax Wordpress Twitter Google Analytics PrestaShop

Forum Oseox
Oseox

Crawl-delay et robots.txt

Forum Référencement et Trafic
Nous sommes le Mer 24 Oct 2018 07:05

Heures au format UTC [ Heure d’été ]




Poster un nouveau sujet Répondre au sujet
Auteur Message
MessagePosté: Mer 25 Aoû 2010 18:56 
Avatar de l’utilisateur
Salut,

Drupal utilise par défaut un robots.txt avec un "Crawl-delay: 10", donc je me pose la question sur la réelle utilité de cette valeur.
Personnellement je n'y ai jamais trop prêté attention... Est-ce que vous avez déjà vu (par expérience ou dans des articles sur le sujet) une différence avec et sans cette valeur ?

Merci.


Dernière édition par mickaelb le Mer 25 Aoû 2010 19:45, édité 1 fois.

Haut
 Profil Envoyer un e-mail  
 
MessagePosté: Mer 25 Aoû 2010 19:44 
Avatar de l’utilisateur
Google semble l'ignorer autant que le meta revisited after


Difficile de dompter Google bot :)


Haut
 Profil Envoyer un e-mail  
 
MessagePosté: Lun 30 Aoû 2010 22:39 
Professionnel
Professionnel
Avatar de l’utilisateur
Nope rien de mon cote


Haut
 Profil Envoyer un e-mail  
 
MessagePosté: Lun 30 Aoû 2010 22:44 
Avatar de l’utilisateur
Ok, merci pour les rep! Après avoir vu le truc en action je serais incapable de dire si ça a joué ou pas... Ca restera un détail parmi tant d'autres.


Haut
 Profil Envoyer un e-mail  
 
Afficher les messages postés depuis:  Trier par  
Poster un nouveau sujet Répondre au sujet  [ 4 messages ] 

Heures au format UTC [ Heure d’été ]


Qui est en ligne

Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 2 invités


Vous ne pouvez pas poster de nouveaux sujets
Vous ne pouvez pas répondre aux sujets
Vous ne pouvez pas éditer vos messages
Vous ne pouvez pas supprimer vos messages
Vous ne pouvez pas joindre des fichiers

Rechercher:
Aller à:  
cron
Abonnez-vous au flux RSS

Blog

Copyright : Moteur, traduction et optimisation
Merci de votre visite sur le forum Oseox