# robots.txt für arto.de # Diese Webcrawler schließe ich aus User-agent: Sidewinder Disallow: / User-agent: Microsoft.URL.Control Disallow: / # Diese Ordner/Dateien sollen nicht durchsucht werden User-agent: * Disallow: /assets/