Alles über den Nutzen und die Erstellung einer Sitemap-Seite für Ihre Website

Wenn eine Suchmaschine auf eine Website gelangt, verhält sie sich wie ein Besucher in einem Gebäude ohne Grundriss. Sie öffnet Türen, folgt Fluren und übersieht manchmal ganze Räume. Die Sitemap ist dieser Grundriss: eine Datei, die die Adressen Ihrer Website auflistet, damit Google, Bing und die anderen genau wissen, was sie erkunden sollen.

XML-Sitemap und robots.txt: zwei komplementäre Dateien, nicht austauschbar

Die Datei robots.txt weist die Bots an, was sie nicht erkunden sollen. Die Sitemap macht das Gegenteil: Sie zeigt an, was Sie entdeckt haben möchten. Die beiden zu verwechseln, bedeutet, eine Liste von Verboten mit einer Einladungskarte zu vermischen.

Konkret erzwingt die Sitemap nicht die Indizierung einer Seite. Google stellt in seiner offiziellen Dokumentation klar: Diese Datei erleichtert das Auffinden von URLs, aber die Entscheidung zur Indizierung bleibt beim Suchmaschinenbetreiber. Wenn eine Seite durch robots.txt blockiert ist oder einen Fehler zurückgibt, ändert ihre Präsenz in der Sitemap nichts daran.

Damit die Datei berücksichtigt wird, funktionieren noch zwei Methoden: Sie in der Google Search Console zu deklarieren oder ihren Pfad in robots.txt hinzuzufügen. Der alte Mechanismus des „Pings“ (automatische Benachrichtigung über eine dedizierte URL) wurde von Google seit 2023 eingestellt.

Ein konkretes Beispiel für eine gut strukturierte Sitemap findet sich auf der Sitemap-Seite von L’Igor Web, die die URLs der Website in einem von Suchmaschinen lesbaren Format zusammenfasst.

lastmod-Tag in einer Sitemap: Was Google wirklich nutzt

Haben Sie schon einmal das Tag lastmod in einer Sitemap-Datei bemerkt? Es gibt das Datum der letzten Änderung einer Seite an. Auf dem Papier hilft es den Suchmaschinen, ihre Erkundung zu priorisieren, indem sie zuerst die kürzlich aktualisierten Inhalte besuchen.

In der Praxis nutzt Google dieses Datum nur, wenn es regelmäßig genau ist. Wenn Sie Ihre Sitemap jede Nacht regenerieren und alle Daten auf „heute“ setzen, ohne dass sich der Inhalt tatsächlich ändert, ignoriert die Suchmaschine die Information schließlich. Das Datum muss einer signifikanten Änderung entsprechen: überarbeiteter Text, hinzugefügte strukturierte Daten, geänderte interne Links.

Die bloße Aktualisierung des Copyright-Hinweises im Footer oder das Ändern eines Wortes im Footer stellt keine signifikante Änderung dar. CMS, die die Sitemap automatisch mit aktualisierten Daten bei jedem Build regenerieren, schaffen genau dieses Problem.

• Ein zuverlässiges lastmod-Datum hilft Google, Ihre priorisierten Seiten schneller zu erkunden
• Ein gefälschtes oder automatisiertes Datum ohne Bezug zum Inhalt wird schließlich ignoriert
• Die Tags priority und changefreq, die früher beliebt waren, werden von Google nicht mehr für seine Erkundungsentscheidungen verwendet

Sitemap und IndexNow bei Bing: zwei Mechanismen, die sich nicht ausschließen

Google zieht die meiste Aufmerksamkeit auf sich, aber Bing behandelt Sitemaps in einem Punkt anders. Das Protokoll IndexNow, unterstützt von Bing (und anderen teilnehmenden Suchmaschinen), ermöglicht es, in Echtzeit zu melden, dass eine Seite erstellt, geändert oder gelöscht wurde.

Die Sitemap bleibt ein periodisches Inventar. IndexNow funktioniert wie eine sofortige Benachrichtigung. Beide ergänzen sich, anstatt sich zu ersetzen: Die Sitemap gibt den Überblick, IndexNow beschleunigt die Berücksichtigung punktueller Änderungen.

Bing Webmaster Tools bietet auch einen Abdeckungsbericht, der mit der Sitemap verbunden ist. Dieser Bericht vergleicht die eingereichten URLs mit denen, die tatsächlich erkundet und indiziert wurden. Wenn Sie 200 URLs einreichen und nur 120 als indiziert erscheinen, hilft der Bericht, ein Entdeckungsproblem (der Bot findet die Seite nicht) von einem Indizierungsproblem (der Bot findet die Seite, entscheidet sich aber, sie nicht zu indizieren) zu unterscheiden.

Eine XML-Sitemap auf WordPress oder manuell erstellen

Auf WordPress generiert das CMS seit Version 5.5 standardmäßig eine Sitemap. Diese native Sitemap umfasst Seiten, Artikel, Kategorien und Tags. Für eine einfache Website reicht das aus.

Spezialisierte Erweiterungen (Yoast SEO, Rank Math, XML Sitemaps) fügen Optionen hinzu: bestimmte Inhaltsarten ausschließen, die Sitemap nach Kategorie segmentieren oder eine Sitemap-Index für umfangreiche Websites verwalten.

Ein Sitemap-Index fasst mehrere Sitemap-Dateien unter einer einzigen zusammen. Jede einzelne Datei hat eine Größen- und URL-Anzahlgrenze. Der Sitemap-Index ermöglicht es, diese Einschränkung zu überschreiten, indem die URLs nach Abschnitt (Artikel, Produkte, Seiten) organisiert werden.

Für eine statische Website oder eine maßgeschneiderte Entwicklung bleibt die manuelle Erstellung möglich. Die Datei ist standardmäßiges XML mit einer einfachen Struktur:

• Ein Wurzel-Tag urlset, das alles umschließt
• Ein Block url pro Adresse, der mindestens das Tag loc mit der vollständigen URL enthält
• Optional das Tag lastmod mit einem Datum im ISO 8601-Format
• Die Datei muss in UTF-8 kodiert und öffentlich zugänglich sein, normalerweise im Stammverzeichnis der Website

Ein Sitemap, das in der Search Console nicht funktioniert, diagnostizieren

Google Search Console zeigt den Status Ihrer Sitemap nach der Einreichung an. Zwei Informationen sind wichtig: die Anzahl der erkannten URLs und die Anzahl der indizierten URLs. Eine erhebliche Diskrepanz zwischen beiden weist auf ein Problem hin, das untersucht werden sollte.

Häufige Fehler sind oft banal. URLs mit Weiterleitungen oder 404-Fehlern in der Sitemap verschmutzen die Datei und mindern ihren Nutzen. Eine Sitemap sollte nur Seiten enthalten, die einen 200-Code zurückgeben (Seite zugänglich) und die Sie tatsächlich indiziert sehen möchten.

Passwortgeschützte Seiten, Seiten mit internen Suchergebnissen, Seiten mit facettierten Filtern in einem E-Commerce: All dies hat in einer Sitemap nichts zu suchen. Jede URL, die in der Datei vorhanden ist, sendet ein Signal an die Suchmaschine: „Diese Seite verdient es, erkundet zu werden“. Wenn Sie Seiten ohne Wert einfügen, verschwenden Sie das Crawling-Budget, das der Bot Ihrer Website zuweist.

Der Abdeckungsbericht in der Search Console wird dann zu einem echten technischen Diagnosewerkzeug, weit über eine einfache Empfangsbestätigung hinaus. Regelmäßiger Vergleich der eingereichten und indizierten URLs zeigt Schwächen Ihrer Architektur, bevor sie Ihre Sichtbarkeit in den Suchergebnissen beeinträchtigen.