Methodik & Funktionsweise
Was wird geprueft?
Prüft die XML-Sitemap einer Website auf Gültigkeit und Vollständigkeit.
Wie funktioniert es?
Discovery folgt der sitemaps.org-Spec: zuerst wird die robots.txt nach einer Sitemap:-Direktive durchsucht (kanonische Methode, die auch Google und Bing nutzen). Erst wenn dort nichts steht, werden gängige Pfade als Fallback geprüft (/sitemap.xml, /sitemap_index.xml für Yoast, /sitemap-index.xml für Astro, /wp-sitemap.xml für WordPress-Core, /sitemap-0.xml). Anschließend wird das XML geparst und auf Pflichtfelder (loc, lastmod) geprüft. Sitemap-Indizes werden ebenfalls unterstützt.
Beispiel-Ergebnis
example.com → robots.txt verweist auf /sitemap-index.xml → 42 URLs gefunden, 3 ohne lastmod, 1 URL mit HTTP-Fehler 404
Hinweise
Sehr große Sitemaps (>50.000 URLs) werden nur teilweise analysiert. Wenn weder die robots.txt eine Sitemap deklariert noch einer der Standard-Pfade antwortet, gilt die Sitemap als nicht gefunden.
Was ist eine XML-Sitemap?
Eine XML-Sitemap ist eine strukturierte Datei, die Suchmaschinen alle indexierbaren URLs einer Website auflistet. Sie hilft Crawlern, alle Seiten zu finden – besonders solche, die über die normale Navigation schwer erreichbar sind. Eine gute Sitemap enthält neben den URLs auch das Datum der letzten Änderung (lastmod), damit Suchmaschinen wissen, welche Seiten aktualisiert wurden. Unser Sitemap Validator prüft das XML-Format, die Erreichbarkeit der gelisteten URLs und die Vollständigkeit der Pflichtfelder.
Sitemap-Optimierung
- 1Maximal 50.000 URLs pro Sitemap – nutzen Sie Sitemap-Indizes für größere Websites.
- 2Verwenden Sie realistische lastmod-Daten, nicht das aktuelle Datum für alle Seiten.
- 3Referenzieren Sie die Sitemap in der robots.txt mit: Sitemap: https://example.com/sitemap.xml
- 4Entfernen Sie URLs mit noindex oder Redirect aus der Sitemap.