# Liste der Verzeichnisse und Seiten, die nicht # durchsucht werden sollen User-agent: * Disallow: /images/ Disallow: /config/ # ab hier alle Robots, die nicht suchen sollen User-agent: EmailCollector Disallow: / User-agent: EmailSiphon Disallow: / User-agent: EmailWolf Disallow: / User-agent: ExtractorPro Disallow: / User-agent: SiteSnagger Disallow: / User-agent: WebStripper Disallow: / User-agent: Offline Explorer Disallow: / User-agent: WebCopier Disallow: / # Robots die durchdrehen fliegen raus User-agent: GagaRobot Disallow: /