Robots.txt-Generator
Allow-/Disallow-Regeln je Crawler und Sitemap-Links, fertig zum Einfügen
Warum uns Menschen wählen
Von Grund auf privat
Deine Eingabe wird sicher verarbeitet und nie verkauft. Client-seitige Tools verlassen deinen Browser nie.
Sofort & gratis
Keine Installation, kein Warten. Ergebnisse in Sekunden, direkt im Browser, auf jedem Gerät.
Für immer gratis
Keine Anmeldung, keine Wasserzeichen, keine Limits. Alle clientseitigen Tools sind frei nutzbar.
Häufige Fragen
Was bedeutet eine leere Disallow-Zeile?⌄
Ein einfaches „Disallow:“ ohne Angabe dahinter bedeutet „nichts sperren“ – dieser Crawler darf also überall zugreifen. Genau das erzeugt die Vorlage „Alles erlauben“.
Verhindert robots.txt wirklich, dass Seiten indexiert werden?⌄
Nicht zuverlässig von allein – es bittet nur brav agierende Crawler, einen Pfad nicht abzurufen. Eine Seite kann trotzdem indexiert werden (z. B. wenn woanders auf sie verlinkt wird), selbst wenn sie gesperrt ist. Um eine Seite wirklich aus den Suchergebnissen herauszuhalten, nutze stattdessen ein noindex-Meta-Tag oder einen HTTP-Header.
Werden meine Inhalte irgendwohin hochgeladen?⌄
Nein – alles läuft mit reinem JavaScript direkt in deinem Browser. Nichts, was du eingibst, wird jemals an einen Server gesendet.
Ähnliche Tools
Ähnliche Tools
Meta-Tag-Generator
Title, Description, Keywords, Canonical und Robots Meta-Tags mit Live-Google-Vorschau
Social-Share-Vorschau
Open-Graph- + Twitter-Card-Tags mit Live-Vorschaukarte im Facebook-/Twitter-Stil
Sitemap-Generator
URL-Liste einfügen, fertige XML-Sitemap oder Sitemap-Index erhalten