# robots.txt for http://www.runnersdrive.de/ # Zugriff auf alle Dateien erlauben User-agent: * Disallow: # Massendownloader vom CGI Verzeichnis fernhalten User-agent: wget User-agent: webzip User-agent: webmirror User-agent: webcopy Disallow: /cgi-bin/ User-agent: EmailCollector Disallow: / # Sitemap: http://www.runnersdrive.de/sitemap.xml