Bildwerkzeuge
PDF-Werkzeuge
PDF komprimieren DemnächstPDF zu Word DemnächstWord zu PDF DemnächstPDF zusammenführen DemnächstPDF aufteilen DemnächstPDF zu Bild Demnächst
Video-Werkzeuge
Kostenloser Video-KomprimiererVideokonverter DemnächstVideo schneiden DemnächstGIF erstellen
Audio-Werkzeuge
Audio komprimieren DemnächstAudiokonverter DemnächstAudio schneiden Demnächst
Dev-Tools
QR-Code-GeneratorFarbwählerJSON-FormatiererBase64-Encoder DemnächstURL-Encoder Demnächst

Robots.txt Generator

Erstellen, validieren und testen Sie robots.txt-Dateien. KI-Crawler blockieren, Vorlagen fuer WordPress/Shopify/Wix. Kostenlos.
Control which AI bots can access your site
AI Training Crawlers
AI Search Bots
Blocking these may break link previews
seconds
Preview
Everything runs in your browser — no data sent to any server

So erstellen Sie eine robots.txt

  1. Vorlage waehlen — WordPress, Shopify, Wix oder leer
  2. Regeln hinzufuegen — Pfade fuer bestimmte Crawler erlauben oder blockieren
  3. KI-Crawler blockieren — einzelne Bots ein-/ausschalten
  4. Sitemap hinzufuegen
  5. Vorschau & Download

KI-Crawler steuern

Blockieren Sie Training-Crawler wie GPTBot und Google-Extended, waehrend Googlebot und Bingbot zugelassen bleiben. Unterscheiden Sie zwischen KI-Training und KI-Suche.

Plattform-Vorlagen

Optimierte Vorlagen fuer WordPress, Shopify, Wix und Content-Seiten mit SEO-Best-Practices.

Robots.txt validieren

Pruefen Sie Syntaxfehler, doppelte Regeln und fehlende Sitemap-Angaben im Validierungs-Tab.

URL-Zugriff testen

Testen Sie, ob eine bestimmte URL erlaubt oder blockiert ist. Waehlen Sie einen User-Agent und geben Sie den Pfad ein.

Kostenlos und privat

Laeuft vollstaendig im Browser. Keine Uploads, keine Konten, keine Grenzen. Ihre Daten verlassen niemals Ihr Geraet.

Häufig gestellte Fragen

Eine robots.txt-Datei teilt Suchmaschinen-Crawlern mit, auf welche Seiten sie zugreifen duerfen. Sie befindet sich im Stammverzeichnis Ihrer Domain und folgt dem Robots Exclusion Protocol.
Nicht direkt. robots.txt verhindert das Crawlen, aber eine Seite kann trotzdem in den Ergebnissen erscheinen, wenn andere Seiten darauf verlinken. Fuer vollstaendige Blockierung verwenden Sie noindex.
Ja! Dieses Tool enthaelt Schalter zum Blockieren von KI-Training-Crawlern (GPTBot, CCBot, ClaudeBot) bei gleichzeitiger Zulassung von KI-Suchbots.
Vorlagen bieten eine optimierte robots.txt fuer WordPress, Shopify, Wix oder Content-Seiten mit empfohlenen SEO-Regeln.
Nein. Alles laeuft zu 100% in Ihrem Browser. Keine Daten werden hochgeladen oder gespeichert.
Laden Sie die Datei herunter und laden Sie sie in das Stammverzeichnis Ihrer Website hoch. Die Datei muss unter ihredomain.de/robots.txt erreichbar sein.

Das volle Potenzial freischalten

Unbegrenzter Zugriff auf alle Tools, priorisierte Verarbeitung und Premium-Funktionen.

Ab$9/Monat
Pläne ansehenJederzeit kündbar. Keine versteckten Gebühren.