Entdecken Sie, wie Sie eine Sitemap effektiv erkunden, um Ihre Webnavigation zu optimieren
Eine Sitemap listet die URLs einer Website in einer strukturierten Datei auf, aber nicht alle Suchmaschinen nutzen diese Datei auf die gleiche Weise. Google, Bing und andere Crawling-Roboter interpretieren die enthaltenen Tags unterschiedlich, was die Art und Weise verändert, wie sie erstellt und gepflegt wird. Diese Verhaltensweisen zu vergleichen, ermöglicht präzisere technische Entscheidungen bei der Konfiguration einer Sitemap.
XML-Sitemap: Wie Google und Bing Tags unterschiedlich behandeln
| Sitemap-Tag | Behandlung durch Google | Behandlung durch Bing |
|---|---|---|
| lastmod | Wird verwendet, wenn das Datum eine tatsächliche und überprüfbare Änderung widerspiegelt | Mit der Priorisierung des Crawls verbunden, ergänzt durch IndexNow |
| changefreq | In der Praxis ignoriert | Kein zuverlässiger Hebel zur Beschleunigung des Crawls |
| priority | In der Praxis ignoriert | Kein zuverlässiger Hebel zur Beschleunigung des Crawls |
| Einreichung | Über die Google Search Console oder robots.txt | Über die Bing Webmaster Tools, robots.txt oder IndexNow |
Diese Tabelle hebt einen oft übersehenen Punkt hervor: Die Felder changefreq und priority dienen bei keinem der beiden großen Suchmaschinen mehr dazu, das Crawlen zu beschleunigen. Diese Tags in einer Sitemap zu behalten, ist nicht schädlich, aber Zeit für die Konfiguration darauf zu verwenden, bedeutet, ein Signal zu optimieren, das niemand liest.
Der signifikanteste Unterschied betrifft lastmod. Google stellt klar, dass diese Information nur berücksichtigt wird, wenn sie “konsistent und überprüfbar” ist. Eine einfache automatische Regeneration der Sitemap oder die Aktualisierung eines sekundären Feldes (zum Beispiel das Copyright-Datum) stellt keine relevante Änderung dar. Bing hingegen nutzt lastmod zur Planung seiner Crawls, empfiehlt jedoch, es mit IndexNow für punktuelle Änderungen zu kombinieren.
Diejenigen, die eine redaktionelle Website oder einen Produktkatalog verwalten, können die Sitemap von Little Geek erkunden, um zu beobachten, wie eine strukturierte XML-Datei ihre URLs konkret nach Kategorien organisiert.
IndexNow und Sitemap: zwei komplementäre Signale für Bing
Bing empfiehlt nun, Sitemap und IndexNow zu kombinieren, anstatt sie gegeneinander auszuspielen. Die Sitemap bietet eine anhaltende Abdeckung aller URLs. IndexNow hingegen dient dazu, schnell über das Hinzufügen, Ändern oder Löschen einer Seite bei den teilnehmenden Suchmaschinen zu benachrichtigen.
Diese Unterscheidung verändert die Denkweise zur Aktualisierung einer Sitemap. Für eine Website, deren Seiten sich wenig ändern, reicht die Sitemap allein aus. Für eine redaktionelle Website, die mehrere Artikel pro Tag veröffentlicht, oder einen E-Commerce-Shop mit wechselnden Produktseiten, beschleunigt IndexNow die Berücksichtigung, ohne auf den nächsten geplanten Crawl zu warten.
Google hat IndexNow nicht übernommen. Für Websites, die hauptsächlich auf Google-Traffic abzielen, bleiben die Einreichung der Sitemap über die Google Search Console und die Erklärung in der robots.txt die beiden Referenzkanäle. Für diejenigen, die Bing und die Suchmaschinen, die auf seinem Index basieren (darunter Microsoft Copilot), abdecken möchten, wird der doppelte Ansatz von Sitemap und IndexNow relevant.
Welche URLs in eine Sitemap aufnehmen, damit sie nützlich bleibt
Eine effektive Sitemap enthält nicht alle URLs einer Website. Sie listet nur die auf, die indexiert werden sollten. Das Mischen nützlicher Seiten mit technischen, umgeleiteten oder duplizierten URLs verwässert das Signal, das an die Roboter gesendet wird, und kann das Crawlen der priorisierten Inhalte verlangsamen.
Hier sind die Filterkriterien, die vor der Erstellung oder Aktualisierung einer Sitemap-Datei angewendet werden sollten:
- Jede URL in der Sitemap muss einen HTTP-Statuscode 200 zurückgeben. Seiten mit einer 301- oder 302-Weiterleitung, 404-Fehlern und URLs, die durch robots.txt blockiert sind, haben in der Datei keinen Platz.
- Seiten mit einem noindex-Meta-Tag müssen ausgeschlossen werden. Das Einfügen einer noindex-URL in eine Sitemap sendet ein widersprüchliches Signal an die Suchmaschine, die zwischen zwei gegensätzlichen Anweisungen wählen muss.
- URLs mit Sitzungs-, Sortier- oder Filterparametern (häufig auf E-Commerce-Websites vorhanden) sollten zugunsten der kanonischen Version jeder Seite ausgeschlossen werden.
- Inhalt, der über die erste Seite hinaus paginiert ist, kann aufgenommen werden, aber nur, wenn jede Paginierungsseite einen eigenen, indexierbaren Inhalt enthält.
Eine gute Sitemap überschreitet nicht einige Tausend URLs pro Datei. Darüber hinaus erleichtert die Aufteilung in mehrere Sitemaps, die durch eine Indexdatei referenziert werden, sowohl die Verarbeitung durch die Roboter als auch die Wartung auf Webmaster-Seite.
HTML-Sitemap und XML-Sitemap: eine unterschiedliche Nutzung
Die XML-Sitemap richtet sich an Crawling-Roboter. Die HTML-Sitemap hingegen ist eine Seite der Website, die für Besucher bestimmt ist. Beide haben weder das gleiche Format, noch die gleiche Rolle, noch die gleiche SEO-Wirkung.
Die HTML-Sitemap kann den Nutzern helfen, eine in der Struktur versteckte Seite zu finden. Sie trägt auch zur internen Verlinkung bei, indem sie Links zu tiefen Seiten erstellt. Im Gegensatz dazu ersetzt sie niemals eine gut gestaltete interne Verlinkung: Eine Seite, die nur über die HTML-Sitemap zugänglich ist, signalisiert ein Strukturproblem, keine Lösung.
Einreichung der Sitemap: Search Console, robots.txt und häufige Fehler
Die Erklärung einer Sitemap garantiert weder deren Crawling noch die Indexierung der enthaltenen URLs. Die Einreichung ist ein Signal, kein Befehl. Google und Bing entscheiden dann, basierend auf ihren eigenen Kriterien (Inhaltsqualität, Crawl-Budget, Domain-Autorität), welche Seiten es wert sind, gecrawlt zu werden.
Es gibt zwei Methoden zur Einreichung. Die erste erfolgt über die Benutzeroberfläche der Webmaster-Tools (Google Search Console oder Bing Webmaster Tools), wo die Datei manuell erklärt wird. Die zweite besteht darin, die Zeile Sitemap: gefolgt von der vollständigen URL der Datei in robots.txt hinzuzufügen. Beide Methoden sind komplementär.
Der häufigste Fehler nach der Einreichung besteht darin, den Abdeckungsbericht nicht zu überprüfen. Die Search Console zeigt an, wie viele eingereichte URLs gecrawlt, indexiert oder ausgeschlossen wurden und aus welchem Grund. Eine eingereichte und dann vergessene Sitemap verliert allmählich ihre Kohärenz mit der tatsächlichen Website, insbesondere wenn Seiten gelöscht oder umgeleitet werden, ohne die Datei zu aktualisieren.
Das Feld lastmod, wenn es korrekt mit dem Datum der letzten wesentlichen Änderung ausgefüllt ist, hilft den Suchmaschinen, ihre Crawls zu priorisieren. Umgekehrt führt eine künstliche Aktualisierung von lastmod (durch nächtliches Regenerieren der Datei ohne tatsächliche Änderungen) dazu, dass es ignoriert wird oder sogar das Vertrauen schädigt.
Eine gut gepflegte Sitemap bleibt eine lebendige Datei, die ständig mit der tatsächlichen Struktur der Website in Einklang steht. Ihr Wert hängt nicht von ihrer Größe ab, sondern von der Relevanz jeder URL, die sie enthält.
