Eine Sitemap ist eine Datei, die die URLs einer Website auflistet, um die Erkundung durch Suchmaschinen zu erleichtern. Im XML-Format übermittelt sie Google oder Bing die Struktur der Website, die zu erkundenden Seiten und deren letzte Änderungsdaten. Ihre Rolle beschränkt sich nicht nur auf die Indizierung: Sie trägt auch sekundär zur Auswahl der kanonischen URL bei, wenn Duplikate vorhanden sind.
Die XML-Sitemap als technisches Signal für Suchmaschinen
Das XML-Format ist der Standard, der von den Crawling-Robotern verwendet wird. Jeder Eintrag in der Datei entspricht einer URL, die mit Metadaten versehen ist. Unter diesen hat nur das lastmod-Tag ein echtes Interesse für Google.
Google ignoriert die Felder priority und changefreq. Diese beiden Parameter, die vom Protokoll sitemaps.org stammen, beeinflussen weder die Crawling-Frequenz noch das Ranking einer Seite. Eine effektive Sitemap konzentriert sich daher auf zuverlässige Änderungsdaten, die eine tatsächliche Änderung des Inhalts widerspiegeln und nicht nur die einfache Regeneration der Datei.
Die Sitemap spielt auch eine Rolle als Signal zur Kanonisierung. Wenn mehrere URLs zum gleichen Inhalt führen, kann Google die im Sitemap angegebene Version berücksichtigen, um die kanonische Adresse auszuwählen. Dieses Signal bleibt schwach im Vergleich zu einem expliziten canonical-Tag, verstärkt jedoch die allgemeine Kohärenz der Website. Um die Seiten von Référencement Qualitatif zu erkunden, ist diese Logik der Kohärenz zwischen Sitemap und canonical-Tags genau das, was einen soliden technischen Ansatz strukturiert.
Sitemap und Crawl-Budget: Eine Herausforderung für große Websites
Das Crawl-Budget bezeichnet die Menge an Ressourcen, die Googlebot einer Website bei jedem Besuch widmet. Auf einer Website mit einigen Dutzend gut verlinkten Seiten hat dieses Konzept keine praktische Auswirkung. Die interne Verlinkung reicht aus, um den Roboter zu jedem Inhalt zu führen.
Die Situation ändert sich für Websites, die mehrere Tausend Seiten überschreiten oder deren Architektur viele parametrisierte URLs generiert. In diesen Fällen leitet die Sitemap den Roboter zu den wichtigen Seiten und verhindert, dass er Anfragen auf wertlosen URLs verschwendet.
Wann die Sitemap zu einem Filter wird
Eine leistungsfähige Sitemap listet nicht alle zugänglichen URLs auf. Sie schließt Seiten aus, die nicht indiziert werden sollen:
- Weitergeleitete URLs (301 oder 302), die auf eine andere Adresse verweisen und die Datei ohne Nutzen überladen
- Seiten, die durch die Datei robots.txt blockiert oder als noindex markiert sind, deren Präsenz in der Sitemap ein widersprüchliches Signal an die Suchmaschinen sendet
- URLs mit Sortier-, Filter- oder Paginierungsparametern, die bestehenden Inhalt duplizieren
Eine Sitemap, die nicht indizierbare URLs enthält, verliert an Glaubwürdigkeit bei Google. Die Suchmaschine schenkt der Datei insgesamt weniger Aufmerksamkeit.
Eine XML-Sitemap einreichen und aktuell halten
Eine Sitemap zu erstellen reicht nicht aus. Ihre Einreichung und Pflege bestimmen ihren tatsächlichen Nutzen.
Erklärung in der robots.txt
Die einfachste Methode besteht darin, eine Zeile in die Datei robots.txt im Stammverzeichnis der Website hinzuzufügen. Diese Erklärung ermöglicht es allen kompatiblen Suchmaschinen, die Sitemap ohne manuelle Eingriffe in jedes Webmaster-Tool zu finden.
Google Search Console und Bing Webmaster Tools
Die Einreichung über die Google Search Console bietet einen zusätzlichen Vorteil: den Statusbericht. Google gibt an, wie viele URLs der Sitemap entdeckt, gecrawlt und dann indiziert wurden. Die Diskrepanz zwischen eingereichten und indizierten URLs zeigt technische Probleme auf (404-Fehler, Schleifenweiterleitungen, doppelte Inhalte).
Bing Webmaster Tools bietet eine ähnliche Funktionalität. Die Einreichung der Sitemap bei beiden Suchmaschinen deckt nahezu den gesamten französischsprachigen Suchverkehr ab.
Das Protokoll IndexNow als Ergänzung
IndexNow ermöglicht es, Bing und anderen teilnehmenden Suchmaschinen zu benachrichtigen, wenn eine URL hinzugefügt, geändert oder gelöscht wird. Dieses Protokoll ersetzt nicht die Sitemap: Es beschleunigt die Berücksichtigung punktueller Änderungen. Google nimmt nicht an IndexNow teil, was die XML-Sitemap für die dominierende Suchmaschine notwendig macht.
Häufige Fehler bei der Verwaltung einer XML-Sitemap
Drei Fehler treten regelmäßig auf und verringern die Effizienz der Datei.
Der erste ist die Verwendung von automatisch generierten lastmod-Daten bei jedem Build der Website, ohne Bezug zu einer tatsächlichen Änderung des Inhalts. Google erkennt diese Inkonsistenz und ignoriert schließlich die Daten, was eines der wenigen nützlichen Signale der Sitemap entfernt.
Der zweite betrifft die Eintragung nicht-kanonischer URLs. Wenn die Sitemap sowohl die Version mit www als auch ohne www oder Varianten von HTTP und HTTPS enthält, erhält die Suchmaschine widersprüchliche Signale über die zu bevorzugende Version.
Der dritte Fehler besteht darin, die Sitemap als Ersatz für die interne Verlinkung zu betrachten. Eine Sitemap kompensiert niemals eine fehlerhafte Linkarchitektur. Suchmaschinen entdecken die meisten Seiten über interne Links. Die Sitemap kommt ergänzend zum Einsatz, für verwaiste Seiten oder kürzlich veröffentlichte Inhalte, die noch keine Links erhalten haben.
- Überprüfen Sie vierteljährlich, dass die URLs der Sitemap einen Statuscode 200 zurückgeben und den angegebenen Kanonischen entsprechen
- Veraltete Einträge löschen, anstatt die Datei unbegrenzt wachsen zu lassen
- Regelmäßig die Anzahl der eingereichten und indizierten URLs in der Search Console vergleichen, um Anomalien zu erkennen
Die Sitemap bleibt eine technische Datei, deren Wert vollständig von ihrer Qualität abhängt. Eine saubere Datei, die mit zuverlässigen Daten aktualisiert und auf tatsächlich indizierbare URLs beschränkt ist, vermittelt den Suchmaschinen ein klares Bild der Website. Im Gegensatz dazu wird eine vernachlässigte oder mit unnötigen URLs überladene Sitemap zu einem Hintergrundrauschen, das die Roboter lernen zu ignorieren.
