User-agent: * # permet l'accès au site à tous les robots (crawler) # Ici un commentaire : User-agent: * signifie que l'accès est accordé à tous les robots # Ici un commentaire : Disallow signifie simplement que l'accès est refusé au robots # Ici un commentaire : Disallow: /temps/ l'accès est refusé aux robots dans le dossier temps # Ici un commentaire Toute ligne commençant par le sigle # est considérée comme un commentaire et ignorée. # Ici un commentaire : Disallow: /services/info.html l'accès est refusé aux robots pour la page info.htm dans le dossier services Ne jamais laisser de lignes vierges, le robot l'interprèterait comme étant la fin du fichier.