# robots.txt für www.hemmler.net.de/svn # Diese Webcrawler schließe ich aus #User-agent: * #Disallow: / #User-agent: Slurp #Disallow: / #Crawl-delay: 10 #User-agent: msnbot #Disallow: / #User-agent: Twiceler #Disallow: /