# User-agent: AbachoBOT                 Le spider de Abacho
# User-agent: Ia_archiver               Le spider de Alexa
# User-agent: Scooter                   Le spider de Altavista
# User-agent: Overture-WebCrawler       Le spider de Alltheweb
# User-agent: Antibot                   Le spider de Antisearch
# User-agent: Atomz                     Le spider de AtomZ
# User-agent: ArchitextSpider           Le spider de Excite
# User-agent: Arachnoidea               Le spider de Euroseek
# User-agent: Googlebot                 Le spider de Google
# User-agent: Almaden                   Le spider de IBM
# User-agent: Slurp                     Le spider de Inktomi
# User-agent: UltraSeek                 Le spider de Infoseek
# User-agent: MantraAgent               Le spider de Looksmart
# User-agent: Lycos Spider (T-Rex)      Le spider de Lycos
# User-agent: HenryTheMiragoRobot       Le spider de Mirago
# User-agent: MsnBot                    Le spider de Msn
# User-agent: Psbot                     Le spider de Picsearch
# User-agent: Hippo Fluffy the spider   Le spider de Search
# User-agent: Asterias                  Le spider de Singingfish
# User-agent: Teoma agent1              Le spider de Teoma
# User-agent: ZyBorg                    Le spider de Wisenut

# User-agent: * Tous les moteurs sont concernés 
# User-agent: Googlebot Le spider de Google est concerné uniquement 
# Disallow: Tout est indexé. Identique à un fichier robots.txt inexistant 
# Disallow:/ Toutes les pages et répertoires du site ne sont pas indexés 
# Disallow:/index2.html index2.html situé à la racine du site n'est pas indexé 
# Disallow:/rep rep.html s'il existe n'est pas indexé ainsi que le répertoire rep 
# Disallow:/rep/ La totalité du répertoire rep n'est pas indexée 
# Disallow:/rep/index.html index.html situé dans le répertoire rep n'est pas indexé 
# commentaires Vos commentaires doit être précédé d'un # 

User-agent: *
Disallow:/access/
Disallow:/img/
Disallow:/pdf/
Disallow:/urchin/
Disallow:/stats/
Disallow:/awstats/