Eine Website mit 200 Seiten, von denen die Hälfte in Google unsichtbar bleibt, wir alle haben dieses Szenario erlebt. Das Problem liegt selten am Inhalt: Es ist die Sitemap, die die Crawling-Roboter lenkt (oder verwirrt). Diese Datei richtig zu organisieren, verändert die Entdeckungsrate der Seiten und damit auch das organische Ranking der Website.
XML-Sitemap: eine Diagnose-Datei bevor sie eine URL-Liste ist
Die Sitemap wird oft als einfaches Seiteninventar behandelt. In der Praxis ist es ein Diagnosewerkzeug. Der Sitemaps-Bericht in der Google Search Console zeigt die letzte Analyse der Datei, die Anzahl der erkannten URLs und die Verarbeitungsfehler an. Eine „Erfolg“-Meldung bedeutet, dass die Datei korrekt analysiert wurde, nicht dass alle URLs indexiert sind.
Diese Unterscheidung ist grundlegend. Google behandelt die Sitemap als Entdeckungs-Signal und nicht als automatisches Indexierungsanliegen. Man kann eine vollkommen gültige URL auflisten, die Google aus Mangel an Relevanz oder wegen doppelten Inhalts nicht indexieren wird. Bevor Seiten in die Datei aufgenommen werden, überprüfen wir also, ob sie es wert sind, dort aufgeführt zu werden.
Um die Struktur und die besten Praktiken rund um diese Datei zu vertiefen, die Seite expertsmarketing.fr der Website beschreibt die akzeptierten Formate und die häufigsten Fehler, die vorrangig behoben werden sollten.
Sortierung der URLs in der Sitemap: was wir behalten, was wir entfernen
Der gängige Reflex besteht darin, eine automatische Sitemap über ein Plugin (Yoast, Rank Math, All in One SEO) zu generieren und sie dann nicht mehr zu berühren. Das Ergebnis: Seiten mit Tags, leere Kategoriedateien, URLs mit Sortier- oder Paginierungsparametern, alles vermischt mit strategischen Seiten. Der Google-Roboter verliert Zeit mit unnötigen URLs und verlangsamt das Crawlen der wichtigen Seiten.
Bevor die Datei eingereicht wird, filtern wir nach konkreten Kriterien:
- Jede URL muss einen HTTP-Statuscode 200 zurückgeben. Weiterleitungen (301, 302) und Fehler (404, 410) haben in der Sitemap nichts zu suchen.
- Die Seite muss indexierbar sein: kein noindex-Tag im Head, keine Blockade in der robots.txt.
- Der Inhalt muss einzigartig sein. Eine Produktseite, die in sechs Farbvarianten mit demselben Text aufgeführt ist, überlastet die Datei, ohne einen Mehrwert zu bieten.
- Orphan-Seiten (ohne interne Links) verdienen entweder einen Link aus der Struktur der Website oder sollten aus der Sitemap entfernt werden, wenn sie nicht mehr relevant sind.
Auf einer E-Commerce-Website oder einem Portal mit mehreren Hundert Seiten reduziert dieses Sortieren manchmal die Sitemap um die Hälfte. Der Gewinn ist direkt: Das Crawling-Budget konzentriert sich auf Inhalte mit hohem SEO-Potenzial.
Sitemap-Index und thematische Segmentierung
Wenn die Website mehrere Dutzend Seiten überschreitet, gewinnen wir an Lesbarkeit (für uns und für Google), indem wir die Sitemap segmentieren. Das Protokoll sitemaps.org erlaubt eine Indexdatei, die auf mehrere untergeordnete Sitemaps verweist. Wir können nach Inhaltstyp aufteilen: eine Datei für Blogartikel, eine andere für Dienstleistungsseiten, eine dritte für Produktblätter.
Eine segmentierte Sitemap erleichtert die Diagnose in der Search Console. Wenn der Bericht eine niedrige Indexierungsrate für die Datei „Blog“ anzeigt, aber korrekt für die Datei „Dienstleistungen“, wissen wir genau, wo wir nach dem Problem suchen müssen. Mit einer monolithischen Sitemap verschwindet diese Granularität.
Für Websites, die Videos oder hochwertige Bilder veröffentlichen (Portfolios, Tutorials), gibt es spezielle Sitemaps. Die Videositemap zum Beispiel bereichert die Suchergebnisse mit Thumbnails. Die Rückmeldungen variieren hinsichtlich der tatsächlichen Auswirkungen dieser spezialisierten Dateien je nach Größe der Website, aber auf einer Website mit reichhaltigem visuellem Inhalt bleibt der Aufwand begrenzt für einen potenziellen Gewinn an Sichtbarkeit.
Einreichung und Erklärung der Sitemap: die noch gültigen Methoden
Ein oft übersehener Punkt: der alte Google-Sitemap-Ping-Endpunkt wurde 2023 entfernt. Die Anleitungen, die weiterhin eine URL vom Typ google.com/ping?sitemap=... empfehlen, sind veraltet. Die weitere Nutzung führt nicht zu sichtbaren Fehlern, aber der Aufruf hat keine Wirkung mehr.
Die derzeit anerkannten Methoden zur Erklärung einer Sitemap sind drei:
- Die direkte Einreichung über die Benutzeroberfläche der Google Search Console im Abschnitt „Sitemaps“.
- Die Search Console API, nützlich für Websites, die von technischen Teams oder Automatisierungstools verwaltet werden.
- Die Erklärung in der Datei robots.txt mit der Direktive
Sitemap:, gefolgt von der vollständigen URL der Datei. Diese Methode hat den Vorteil, dass sie auch für Bing und andere Suchmaschinen funktioniert.
In der Regel kombinieren wir die Einreichung über die Search Console und die Erklärung in der robots.txt. Die Redundanz stellt kein Problem dar und deckt den Fall ab, dass eine sekundäre Suchmaschine nur die robots.txt abruft.
Aktualisierungsfrequenz und lastmod-Tag
Das lastmod-Tag in der XML-Sitemap gibt das Datum der letzten Änderung einer Seite an. Google nutzt es als Hinweis, um das Crawlen von kürzlich aktualisierten Inhalten zu priorisieren. Die Falle: Einige CMS aktualisieren dieses Datum bei jeder Speicherung, selbst ohne tatsächliche Änderung des Inhalts. Das Signal verliert dann jegliche Zuverlässigkeit.
lastmod nur aktualisieren, wenn sich der Inhalt tatsächlich ändert, bleibt die Regel. Ein künstliches Datum beschleunigt nicht die Indexierung. Es kann im Gegenteil Googlebot dazu anregen, die Seite erneut zu besuchen, festzustellen, dass es nichts Neues gibt, und letztendlich die Besuche zu verlängern.
Für die Häufigkeit der Regenerierung der Datei selbst eignet sich eine dynamische Sitemap (in Echtzeit generiert oder täglich neu berechnet) für Websites, die häufig veröffentlichen. Eine Unternehmenswebsite, die einmal im Monat aktualisiert wird, benötigt keine stündlich neu berechnete Sitemap.
Die Sitemap ersetzt weder ein solides internes Linking, noch qualitativ hochwertigen Inhalt, noch eine kohärente Website-Struktur. Sie ist ein ergänzender technischer Hebel. Wenn sie gut organisiert, gefiltert und korrekt eingereicht ist, gibt sie den Suchmaschinen genau das, was sie benötigen, um die Website zu crawlen, ohne Ressourcen zu verschwenden.
