robots
robots - HTML/CSS - Programmation
Marsh Posté le 11-04-2003 à 15:06:46
et dedans j'ai mis :
User-agent:*
Disallow
dossier1/
Disallowdossier2/
...
Marsh Posté le 11-04-2003 à 15:07:34
et dedans j'ai mis :
User-agent:*
Disallow:/dossier1/
Disallow:/dossier2/
...
Marsh Posté le 11-04-2003 à 15:08:09
il me semble que Google ne tient pas compte de ce fichier
---------------
mes programmes ·· les voitures dans les films ·· apprenez à écrire
Marsh Posté le 11-04-2003 à 15:12:32
En tout cas pas sur mon site 
Dans mes logs aucun des GET de /robots.txt n'est fait par Google (et pourtant Google y passe très souvent, vu qu'il fait des GET sur les pages du site)
---------------
mes programmes ·· les voitures dans les films ·· apprenez à écrire
Marsh Posté le 11-04-2003 à 17:19:13
Vous etes sur qu'il faille faire pour les repertoires :
Disallowrep/
regardez : http://www.allhtml.com/methodologie/methodologie96.php
Message édité par fabien2b le 11-04-2003 à 17:26:05
Marsh Posté le 11-04-2003 à 14:52:11
J'ai mis un fichier robots qui contient les repertoire et fichier a exclure pourtant google continue a referencer ces pages et repertoire.
Pourtant j'ai bien transferer le fichier en ascii
Faut il lui laisser l'extension txt ?
Cela fait un mois que j'ai ces opérations, donc ce n'est pas une question de temps.