############################################## # 23 Dic. 2008 ###### # # aree da non indicizzare # # nessuna indicizzazione da parte di ogni user-agent per: User-agent: * Disallow: /index.php Disallow: /bak/ Disallow: /base/ Disallow: /images/ Disallow: /cgi-bin/ Disallow: /awstats/ Disallow: /backsite/ Disallow: /biotech/reserved/ Disallow: /testarea ####### # # robot indesiderati: # # Googlebot-Image indicizza le immagini del mio sito User-Agent: Googlebot-Image Disallow: / # NetMechanic è un motore di ricerca a pagamento User-agent: NetMechanic Disallow: / # indicizzano indirizzi posta elettronica User-agent: e-collector Disallow: / User-agent: EmailCollector Disallow: / # Teleport fa il grab del sito sovraccaricando il server User-agent: Teleport Disallow: / # # # #### FINE robots.txt