top of page
Dienstprogramm
Werkzeuge
Mit diesem kostenlosen Tool können Sie eine erweiterte rotot.txt-Datei für Ihre Website erstellen. Es unterstützt beliebte Dienste wie Google, Bing und DuckDuckGo sowie Social-Media-Plattformen wie Facebook und Twitter.
Sie können auch Ihre eigenen benutzerdefinierten Benutzeragenten hinzufügen. Das Tool unterstützt auch eine Sitemap.
In den erweiterten Einstellungen können Sie Ihrer robot.txt-Datei Crawl-Verzögerungen, Host-Direktiven und benutzerdefinierte Anweisungen hinzufügen. Das Tool ist mit einer minimalen Benutzeroberfläche und maximalen Funktionen sehr einfach zu bedienen.
bottom of page