# robots.txt generiert von www.webmasterelite.de # URL:http://www.neuedemokratischealternative.de # Alle Roboter spidern die Domain User-agent: * Disallow: # Verzeichnis soll nicht von * gespidert werden User-agent: * Disallow: # Verzeichnis soll nicht von Crawler V 0.2.1 admin@crawler.de gespidert werden User-agent: Crawler V 0.2.1 admin@crawler.de Disallow: