Voir le sujet précédent :: Voir le sujet suivant |
Auteur |
Message |
chiendent dreamweaver mioche
|
Role du fichier robots.txt , Posté le: 29-10-2006 12:29 |
|
|
J'ai posté mon premier site il y a 8 semaines, je ne comprend pas pourquoi j'ai plein d'erreurs 404 dans les statistiques qui proviennent
d'un fichier robots.txt manquant. Je viens donc de rajouter un fichier
texte de nom robots.txt vide à la racine du site. Je voudrais bien
savoir le role de ce fichier qui je suppose sert aux robots?
Merci. |
|
|
dragao dreamweaver mioche
|
Role du fichier robots.txt , Posté le: 29-10-2006 16:12 |
|
|
moi aussi ça faits la même chose |
|
|
chiendent dreamweaver mioche
|
Role du fichier robots.txt , Posté le: 29-10-2006 21:52 |
|
|
dragao a écrit: |
moi aussi ça faits la même chose |
Ca fait du bien de savoir que l'on est plusieurs dans la meme galère. |
|
|
salemioche salemioche
|
Role du fichier robots.txt , Posté le: 29-10-2006 21:58 |
|
|
le fichier robots.txt indique aux robots qui parcourent vos sites pour le compte des moteurs de recherches si des pages ou des repertoires ne doivent pas être indexés.
A chaque visite sur votre site et dans chaque repertoire le robot va demander le fichier robots.txt pour savoir si vous l'autorisez à lire des pages ET les intégrer dans son index.
ces erreurs sont normales, nul besoin de l'ajouter si vous n'en avez pas l'usage |
|
|
chiendent dreamweaver mioche
|
Role du fichier robots.txt , Posté le: 30-10-2006 10:00 |
|
|
salemioche a écrit: |
le fichier robots.txt indique aux robots qui parcourent vos sites pour le compte des moteurs de recherches si des pages ou des repertoires ne doivent pas être indexés.
A chaque visite sur votre site et dans chaque repertoire le robot va demander le fichier robots.txt pour savoir si vous l'autorisez à lire des pages ET les intégrer dans son index.
ces erreurs sont normales, nul besoin de l'ajouter si vous n'en avez pas l'usage |
Merci pour cette reponse. J'en voudrai un tout petit peu plus (désolée)
Que met-on dans ce fichier pour authoriser les robots a lire les pages et à
les intégrer ou est-ce oui par defaut quand le fichier n'est pas présent?
|
|
|
pagetronic moderateur
|
Role du fichier robots.txt , Posté le: 30-10-2006 10:24 |
|
|
Salut,
oui si il est incohérent, vide, ou non-présent le robot crawl tout le site
-http://www.forum-foot.info/robots.txt
beaucoup de site en utilise, tu peux regarder pour le comprendre |
|
|
chiendent dreamweaver mioche
|
Role du fichier robots.txt , Posté le: 30-10-2006 10:44 |
|
|
pagetronic a écrit: |
Salut,
oui si il est incohérent, vide, ou non-présent le robot crawl tout le site
-http://www.forum-foot.info/robots.txt
beaucoup de site en utilise, tu peux regarder pour le comprendre |
Merci Merci |
|
|
chiendent dreamweaver mioche
|
Role du fichier robots.txt , Posté le: 30-10-2006 12:00 |
|
|
pagetronic a écrit: |
Salut,
oui si il est incohérent, vide, ou non-présent le robot crawl tout le site
-http://www.forum-foot.info/robots.txt
beaucoup de site en utilise, tu peux regarder pour le comprendre |
J'ai regardé et je demande encore un conseil.
Est-ce que ce serait bien d'avoir un fichier robots.txt pour y
Disallow"er" les pages de style CSS (Je n'ai pas de php pour l'instant).
J'espere que je n'abuse pas trop, cela peut peut-etre servir à d'autres
que moi. |
|
|
salemioche salemioche
|
Role du fichier robots.txt , Posté le: 30-10-2006 14:19 |
|
|
par defaut si on a rien a cacher de particulier, mieux vaut ne pas en mettre |
|
|
chiendent dreamweaver mioche
|
Role du fichier robots.txt , Posté le: 30-10-2006 20:23 |
|
|
salemioche a écrit: |
par defaut si on a rien a cacher de particulier, mieux vaut ne pas en mettre |
MERCI, j'ai compris enfin. |
|
|
|