SeitenreportSEO- & Website-Analyse seit 2007
SEO-Audit-Prüfbereich

Crawling & Indexierung

Dieser Bereich zeigt, welche URLs Suchmaschinen finden, crawlen und indexieren können. Er ist zentral für Websites mit vielen Templates, Sitemaps oder Ausschlussregeln.

18 Prüfbereiche 350+ automatisierte Checks Seit 2007 im Einsatz 68.000+ Benchmark-Domains

238 Prüfungen je URL · 126 Checks websiteweit

Seitenreport Audit-Dashboard mit Score, Bereichen und Prioritäten

Was geprüft wird

✓

robots.txt und Meta Robots

✓

Sitemap-Abdeckung

✓

noindex auf wichtigen Seiten

✓

Canonical-Konsistenz

Woran der Audit priorisiert

crawlbare URL-Gruppenindexierbare Zielseitenbessere Sitemap-Qualitätweniger versehentliche Ausschlüsse

Prüfbereich: Crawling & Indexierung.

Eine öffentliche Leistungsseite steht auf noindex

Illustrative Werte, kein Kundenbefund. Vorhandener Audit-Check C03: Kein noindex gesetzt.

Beispiel-URL
https://example.org/leistungen
Beobachteter Wert
meta_robots_noindex = 1.
Erwartung im Check
Für eine zur Indexierung bestimmte Seite: meta_robots_noindex = 0.
Wann die Aussage gilt
Zuerst muss feststehen, dass diese URL öffentlich gefunden werden soll. Eine bewusst ausgeschlossene Such- oder Vorschauseite ist kein unbeabsichtigter Fehler.
Grenze der Aussage
Die Entfernung von noindex garantiert keine Aufnahme in Google. Header, Canonical und Erreichbarkeit bleiben zusätzlich zu prüfen.

Warum dieser Bereich wichtig ist

Crawling und Indexierung entscheiden, ob relevante Seiten überhaupt in Suchmaschinen erscheinen können. Eine starke Content-Strategie hilft wenig, wenn wichtige URLs blockiert, falsch canonicalisiert oder nicht sauber über Sitemap und interne Links erreichbar sind.

Risiko ohne Prüfung

Die größten Risiken sind versehentliche noindex-Signale, widersprüchliche Canonicals, dünne Sitemap-Abdeckung und interne Links auf URLs, die nicht indexierbar sind. Besonders nach Relaunches oder CMS-Änderungen entstehen hier oft Rankingverluste.

Für wen besonders relevant

Wichtig für jede Website mit mehreren Templates, Blog, Ratgeber, Produkten, Standorten, Filtern oder Landingpages. Auch kleine Unternehmenswebsites profitieren, weil Indexierungsfehler dort direkt Sichtbarkeit kosten.

Typische Befunde im Audit

  • relevante Seiten stehen nicht oder falsch in XML-Sitemaps
  • Meta-Robots, X-Robots oder robots.txt blockieren wichtige Inhalte
  • Canonical-Ziele verweisen auf falsche Varianten oder nicht indexierbare Seiten
  • interne Links führen auf Weiterleitungen, Fehlerseiten oder ausgeschlossene URLs

Empfohlene Umsetzung

  • Sitemap nur mit kanonischen, indexierbaren und erreichbaren URLs ausliefern
  • robots.txt und Meta-Robots nach Seitentypen prüfen
  • Canonical-Ziele mit interner Verlinkung und Sitemap konsistent halten
  • nach Relaunches Crawling- und Indexierungsstatus als Pflichtprüfung einplanen

Von der Diagnose zur Umsetzung

Freigeschaltete Audits zeigen nicht nur den Bereich, sondern die betroffenen URLs, Beispiele und Prioritäten. So wird sichtbar, welche Fehler zuerst in Entwicklung, Redaktion, Datenschutz oder Beratung gehören.

Ebene Im Audit sichtbar Nächster Schritt
Prüfbereich Crawling & Indexierung als strukturierter Prüfbereich Alle SEO-Audit-Prüfbereiche vergleichen
Checks 238 Prüfungen je URL und 126 Checks websiteweit Alle Audit-Checks ansehen
Umsetzung Priorisierte Findings und betroffene URLs Website mit Seitenreport analysieren

Häufige Fragen: Crawling & Indexierung

Die wichtigsten Einordnungen vor dem Start einer Analyse.

Warum ist Indexierbarkeit wichtiger als ein einzelner SEO-Score?

Nicht indexierbare Seiten können in Google nicht ranken. Der Score hilft bei der Priorisierung, aber Crawling- und Indexierungsfehler sind oft harte Blocker für Sichtbarkeit.

Prüft Seitenreport auch Sitemaps und robots.txt?

Ja. Der Audit berücksichtigt robots.txt, Sitemap-Hinweise, Indexierungs- und Canonical-Signale und ordnet auffällige URLs in Findings und Bereichs-Scores ein.