# robots.txt für internett-marketing.de # gesamte Site mit HTML-Seiten freigegeben User-agent: * Disallow: /cgi-bin/ Disallow: /logs/ # email Sammler verboten User-agent: WX_mail/2.000 Disallow: / User-agent: EmailCollector Disallow: / User-agent: WhoWhere Disallow: / User-agent: Roverbot Disallow: / User-agent: ActiveAgent Disallow: / User-agent: EmailSiphon Disallow: / # Offlinereader User-agent: Teleport* Disallow: / User-agent: Webwhacker Disallow: / User-agent: Webzip Disallow: / User-agent: Net Attache Disallow: / User-agent: SiteSnagger Disallow: / # durchdrehende robots fliegen raus