Indexierung & Crawling prüfen: SEO-Tools für Google- und KI-Crawler
Kostenlose Einzelchecks und Generatoren · ohne Anmeldung
Prüfen Sie, ob Suchmaschinen Ihre URLs abrufen dürfen, welche Indexierungssignale eine Seite sendet und ob Ihre Sitemaps zum aktuellen Website-Stand passen.
Crawling erlauben und Änderungen testen
- Robots.txt CheckerPrüft Robots.txt-Dateien auf Erreichbarkeit, Syntax, Regeln, Sperren und Hinweise auf Sitemaps.
- Robots.txt GeneratorErstellt eine saubere robots.txt mit User-agent, Allow, Disallow und optionalem Sitemap-Eintrag – inklusive Preview, Copy und Download.
- robots.txt-RegeltesterTestet eingefügte robots.txt-Regeln gegen konkrete URLs und zeigt die ausschlaggebende Allow- oder Disallow-Regel mit Zeilennummer.
- robots.txt-ÄnderungssimulatorVorher und nachher vergleichen: neu gesperrte oder freigegebene URLs aus Listen und Sitemaps finden.
Indexierung und bevorzugte URLs klären
- Indexability CheckerPrüft, ob eine Seite technisch indexierbar ist – inklusive Statuscode, Canonical, Robots-Signalen und HTML-Grundlagen.
- Meta Robots CheckerPrüft Meta-Robots- und X-Robots-Signale auf index, noindex, follow, nofollow und weitere Crawler-Hinweise.
- Meta Robots GeneratorErstellt saubere Meta-Robots-Tags für index, noindex, follow, nofollow und weitere Robots-Direktiven – inklusive Preview und Copy-&-Paste-Code.
- Canonical CheckerPrüft Canonical-Tags, Weiterleitungen und Ziel-URLs – um widersprüchliche Signale bei Tracking-Parametern oder URL-Varianten zu finden.
- Canonical URL GeneratorErstellt saubere rel="canonical"-Tags für Seiten, Varianten-URLs und Duplicate-Content-Szenarien – inklusive Preview und Copy.
- SEO URL CheckerPrüft eine URL auf Statuscode, Redirects, Canonical, Meta Robots, X-Robots-Tag, Title, H1, hreflang und technische Indexierbarkeit.
Sitemaps erstellen, prüfen und vergleichen
- XML Sitemap CheckerPrüft vorhandene Sitemaps auf Fehlerfreiheit und listet enthaltene URLs inkl. Last-Modified auf.
- Sitemap Audit ToolPrüft bis zu 50 Sitemap-Einträge auf finalen Status, Meta Robots und Canonical. Die Stichprobe hilft bei gezielten Sitemap-Korrekturen.
- XML Sitemap GeneratorErstellt aus einer URL-Liste eine saubere sitemap.xml – inklusive Preview, Download und optionalem lastmod, changefreq und priority.
- XML Sitemap Diff CheckerVergleicht zwei Sitemap-Stände: neue, entfernte und geänderte URLs mit lastmod und weiteren Metadaten. Mit Dateiimport, Filtern und CSV-Export.
- HTML-Sitemap-GeneratorErstellt eine HTML-Sitemap für Besucher aus XML oder URL-Listen. Linktexte bearbeiten, Seiten ausschließen und fertiges HTML exportieren.
- Image Sitemap GeneratorErstellt XML-Bildsitemaps aus Seiten- und Bild-URLs. Gruppiert Bilder je Seite und entfernt doppelte Zuordnungen – lokal im Browser.
- Video Sitemap GeneratorErstellt XML-Videositemaps aus Videoseiten, Vorschaubildern und Player-URLs – mit Formular, CSV-Import und Download.
- Google News Sitemap GeneratorErstellt News-Sitemaps für aktuelle Artikel, prüft Veröffentlichungsdaten und zeigt ältere, ausgelassene Einträge.
- RSS-/Atom-Feed-CheckerRSS und Atom auf XML-Fehler, doppelte Einträge, Datumsangaben und erreichbare Artikel-Links prüfen.
Erreichbarkeit und Sprachversionen ergänzend prüfen
- Orphan Page CheckerVergleicht Sitemap-URLs mit einem Crawl interner Links. Zeigt nicht entdeckte Kandidaten, Quellseiten und die tatsächliche Crawl-Abdeckung.
- Hreflang CheckerPrüft Sprachcodes, Rückverweise und Canonical-Konflikte – um Fehler in der hreflang-Verknüpfung internationaler Seiten zu finden.
- HTTP Statuscode CheckerPrüft HTTP Status Codes für URL, URL-Liste oder Sitemap und zeigt 200 OK, 301/302, 404/410, 5xx und finale Ziel-URL.
So verbinden Sie die Prüfungen
Mit einer konkreten URL beginnen
Prüfen Sie zuerst den HTTP-Status, die Indexierungsregeln und den Canonical einer wichtigen Seite. Eine erreichbare URL kann durch noindex dennoch von der Indexierung ausgeschlossen sein.
Indexability CheckerEine Regeländerung vorab testen
Vergleichen Sie vor der Veröffentlichung, welche Beispiel-URLs ein geänderter robots.txt-Regelsatz zulässt oder sperrt. Eine Crawl-Sperre ersetzt keine noindex-Anweisung.
robots.txt-ÄnderungssimulatorURL-Bestand gegenprüfen
Vergleichen Sie die Sitemap vor und nach einer Umstellung und untersuchen Sie anschließend neue oder entfernte URLs gezielt. Eine Sitemap garantiert keine Indexierung.
XML Sitemap Diff Checker
Häufige Fragen
Reicht eine XML-Sitemap für die Indexierung?
Nein. Eine Sitemap unterstützt die Entdeckung von URLs. Erreichbarkeit, Crawling, Indexierungsregeln und Inhalt müssen zusätzlich passen; die Aufnahme in den Index entscheidet die Suchmaschine.
Welches Tool prüft eine geplante robots.txt-Änderung?
Der Änderungssimulator vergleicht zwei Regelsätze anhand von Beispiel-URLs. Der robots.txt Checker prüft dagegen die veröffentlichte Datei.
Die Website im Zusammenhang prüfen
Der kostenlose SEO-Check untersucht bis zu 20 URLs und bündelt Befunde und priorisierte Maßnahmen.