créer un site


Role du fichier robots.txt

Poster un nouveau sujet sur divers   Répondre au sujet à divers:Role du fichier robots.txt    Accueil Forum -> divers
Voir le sujet précédent :: Voir le sujet suivant  
Auteur Message
chiendent
dreamweaver mioche
dreamweaver mioche
MessageRole du fichier robots.txt , Posté le: 29-10-2006 12:29

J'ai posté mon premier site il y a 8 semaines, je ne comprend pas pourquoi j'ai plein d'erreurs 404 dans les statistiques qui proviennent
d'un fichier robots.txt manquant. Je viens donc de rajouter un fichier
texte de nom robots.txt vide à la racine du site. Je voudrais bien
savoir le role de ce fichier qui je suppose sert aux robots?
Rolling Eyes Rolling Eyes
Merci.
dragao
dreamweaver mioche
dreamweaver mioche
MessageRole du fichier robots.txt , Posté le: 29-10-2006 16:12

moi aussi ça faits la même chose
chiendent
dreamweaver mioche
dreamweaver mioche
MessageRole du fichier robots.txt , Posté le: 29-10-2006 21:52

dragao a écrit:
moi aussi ça faits la même chose


Ca fait du bien de savoir que l'on est plusieurs dans la meme galère. Smile
salemioche
salemioche
salemioche
MessageRole du fichier robots.txt , Posté le: 29-10-2006 21:58

le fichier robots.txt indique aux robots qui parcourent vos sites pour le compte des moteurs de recherches si des pages ou des repertoires ne doivent pas être indexés.

A chaque visite sur votre site et dans chaque repertoire le robot va demander le fichier robots.txt pour savoir si vous l'autorisez à lire des pages ET les intégrer dans son index.

ces erreurs sont normales, nul besoin de l'ajouter si vous n'en avez pas l'usage
chiendent
dreamweaver mioche
dreamweaver mioche
MessageRole du fichier robots.txt , Posté le: 30-10-2006 10:00

salemioche a écrit:
le fichier robots.txt indique aux robots qui parcourent vos sites pour le compte des moteurs de recherches si des pages ou des repertoires ne doivent pas être indexés.

A chaque visite sur votre site et dans chaque repertoire le robot va demander le fichier robots.txt pour savoir si vous l'autorisez à lire des pages ET les intégrer dans son index.

ces erreurs sont normales, nul besoin de l'ajouter si vous n'en avez pas l'usage


Merci pour cette reponse. J'en voudrai un tout petit peu plus (désolée)
Que met-on dans ce fichier pour authoriser les robots a lire les pages et à
les intégrer ou est-ce oui par defaut quand le fichier n'est pas présent?
Smile Smile
pagetronic
moderateur
moderateur
MessageRole du fichier robots.txt , Posté le: 30-10-2006 10:24

Salut,
oui si il est incohérent, vide, ou non-présent le robot crawl tout le site Wink
-http://www.forum-foot.info/robots.txt
beaucoup de site en utilise, tu peux regarder pour le comprendre
chiendent
dreamweaver mioche
dreamweaver mioche
MessageRole du fichier robots.txt , Posté le: 30-10-2006 10:44

pagetronic a écrit:
Salut,
oui si il est incohérent, vide, ou non-présent le robot crawl tout le site Wink
-http://www.forum-foot.info/robots.txt
beaucoup de site en utilise, tu peux regarder pour le comprendre


Merci Merci
chiendent
dreamweaver mioche
dreamweaver mioche
MessageRole du fichier robots.txt , Posté le: 30-10-2006 12:00

pagetronic a écrit:
Salut,
oui si il est incohérent, vide, ou non-présent le robot crawl tout le site Wink
-http://www.forum-foot.info/robots.txt
beaucoup de site en utilise, tu peux regarder pour le comprendre


J'ai regardé et je demande encore un conseil.
Est-ce que ce serait bien d'avoir un fichier robots.txt pour y
Disallow"er" les pages de style CSS (Je n'ai pas de php pour l'instant).
J'espere que je n'abuse pas trop, cela peut peut-etre servir à d'autres
que moi.
salemioche
salemioche
salemioche
MessageRole du fichier robots.txt , Posté le: 30-10-2006 14:19

par defaut si on a rien a cacher de particulier, mieux vaut ne pas en mettre
chiendent
dreamweaver mioche
dreamweaver mioche
MessageRole du fichier robots.txt , Posté le: 30-10-2006 20:23

salemioche a écrit:
par defaut si on a rien a cacher de particulier, mieux vaut ne pas en mettre


MERCI, j'ai compris enfin.
Montrer les messages depuis:   
Poster un nouveau sujet sur divers   Répondre au sujet à divers:Role du fichier robots.txt    Accueil Forum -> divers Toutes les heures sont au format GMT + 1 Heure
Page 1 sur 1

 
Sauter vers:  
S'enregistrerS'enregistrer
ProfilProfil
Se connecter pour vérifier ses messages privésSe connecter pour vérifier ses messages privés
RechercherRechercher
Liste des MembresMembres
FAQFAQ
ConnexionConnexion 


© Mentions Légales