# # robots.txt für http://www.zei.moppelbollo.de/ # # # E-Mail Crawler fernhalten # User-agent:EmailCollector User-agent:EmailSiphon User-agent:EmailWolf Disallow:/ # # # Massendownloader fernhalten # User-agent: wget User-agent: webzip User-agent: webmirror User-agent: webcopy User-agent:ExtractorPro User-agent:SiteSnagger User-agent:WebStripper User-agent:Offline Explorer User-agent:WebCopier Disallow: / # # # Ganze Site für andere Robots freigeben freigeben # User-agent: * Disallow: #