# robots.txt für Luebeck-1876.de # Diese Webcrawler schließe ich aus # User-agent: Sidewinder # Disallow: / # User-agent: Microsoft.URL.Control # Disallow: / # Diese Verzeichnisse/Dateien sollen nicht durchsucht werden User-agent: * Disallow: /test/ # nur zum Testen