# robots.txt fuer Top1004Life.de User-agent: * Disallow: /assets/ Disallow: /banner/ Disallow: /fonts/ Disallow: /images/ Disallow: /languages Disallow: /sources/ Disallow: /skins/ Disallow: /*? Disallow: /captcha.php # Na, schlauer geworden welche Verzeichnisse ihr bei mir alle besuchen könnt? # E-Mail Sammler raus User-agent: WX_mail/2.000 Disallow: / User-agent: ia_archiver Disallow: / User-agent: EmailCollector Disallow: / User-agent: WhoWhere Disallow: / # Rover is a bad dog User-agent: Roverbot Disallow: / User-agent: ActiveAgent Disallow: / User-agent: EmailSiphon Disallow: / # Dank an suchfibel.de für die beispielhafte robots.txt :-)