Robots.txt-Ersteller
Robots.txt-Dateien erstellen und validieren
Schnelleinstellungen
Crawl-Regeln
Sitemap-URLs
Noch keine Sitemaps hinzugefügt
Empfohlen: 1-10 Sekunden (Optimal: 5-10 Sekunden)
Hinweis: Google ignoriert diese Direktive, Bing/Yandex unterstützen sie
Schnelleinstellung: