Fichier Robot.txt

[fatbazou]

Bonjour à tous,

Une petite question: Est-il nécessaire d'inclure un fichier Robot.txt si on ne veut faire aucune exclusion?

[Dan]

Bonjour,

Ce n'est pas indispensable... mais cela évite les entrées dans les logs pour des "file not found !"

Donc, c'est mieux de mettre un fichier robots.txt même s'il ne contient que ces deux lignes :

User-agent: *

Disallow:

[fatbazou]

Ok, merci bien pour cette précision.