Salut,

à quoi servent les fichiers robots.txt

A indiquer aux robots des moteurs de recherche quelles sections de ton site peuvent être indexées (ou non).


Faut-il le créer soi même, où faut-il le placer, que doit-il contenir ?

Oui, à la racine de ton site, et... ça dépend de ce que tu veux :)

Plus d'infos ici :
http://www.commentcamarche.net/web/robots-txt.php3
http://www.robotstxt.org/wc/robots.html
http://docs.abondance.com/robots.html

A+