Eine Sitemap ist eine Datei, die die URLs Ihrer Website auflistet. Sie dient als Leitfaden für die Crawling-Roboter von Google oder Bing, um Ihre Seiten zu durchsuchen. Ohne diese Datei können bestimmte Teile Ihrer Website in den Suchergebnissen unsichtbar bleiben, auch wenn deren Inhalt relevant ist. Das Verständnis ihrer Funktionsweise ermöglicht es, Indexierungsprobleme zu beheben, die viele Website-Besitzer ignorieren.
Was Google nicht mehr in Ihrer XML-Sitemap liest
Haben Sie schon einmal Tags wie priority oder changefreq in einer XML-Sitemap-Datei gesehen? Google ignoriert sie. Diese beiden Felder, die zwar in der Protokollspezifikation vorhanden sind, haben keinen Einfluss auf die Crawling-Frequenz oder das Ranking Ihrer Seiten.
Im Gegensatz dazu bleibt das Tag lastmod das einzige Frische-Signal, das von Google genutzt wird. Es gibt das Datum der letzten tatsächlichen Änderung einer Seite an. Wenn Sie es bei jeder Veröffentlichung oder Korrektur aktualisieren, wissen die Roboter, welche URLs vorrangig erneut besucht werden sollen.
Eine häufige Falle: Einige Tools regenerieren die Sitemap, indem sie das lastmod-Datum aller Seiten aktualisieren, selbst derjenigen, die sich nicht geändert haben. Dieses Verhalten verwischt das Signal. Google vertraut schließlich diesem Tag auf Ihrer Website nicht mehr. Stellen Sie sicher, dass Ihr Sitemap-Generator lastmod nur für tatsächlich geänderte Seiten aktualisiert. Um dieses Thema mit konkreten Beispielen zu erkunden, beschreibt die Website pepseo.fr im Detail die besten Konfigurationspraktiken.
Sitemap und Crawl-Budget: Warum große Websites nicht darauf verzichten können
Nehmen wir ein einfaches Beispiel. Ihre Website enthält mehrere tausend Seiten. Googlebot hat eine begrenzte Zeit, um jede Website zu durchsuchen. Diese Zeit, das sogenannte Crawl-Budget, variiert je nach Autorität Ihrer Domain und der Geschwindigkeit Ihres Servers.
Ohne Sitemap entdeckt der Roboter Ihre Seiten, indem er den internen Links folgt. Wenn eine Seite schlecht mit dem Rest der Website verlinkt ist (kein Link aus dem Menü, kein kontextueller Link), könnte sie niemals durchsucht werden. Die XML-Sitemap kompensiert dieses Problem, indem sie jede URL explizit deklariert.
Für Websites mit weniger als hundert Seiten, die eine korrekte interne Verlinkung aufweisen, bleibt die Sitemap nützlich, aber weniger kritisch. Große oder komplex strukturierte Websites sind direkt darauf angewiesen, damit ihre tiefen Seiten indexiert werden.
Verwaiste Seiten und unsichtbarer Inhalt
Eine verwaiste Seite ist eine Seite, die von keiner anderen Seite der Website verlinkt ist. Sie existiert auf dem Server, aber kein Navigationspfad führt dorthin. Googlebot wird sie nur finden, wenn sie in der Sitemap aufgeführt ist.
Veröffentlichen Sie regelmäßig Inhalte? Jeder neue Artikel muss entdeckt werden. Die Sitemap beschleunigt diesen Prozess, indem sie die neuen URLs sofort nach ihrer Veröffentlichung signalisiert.
Eine Sitemap an Google übermitteln: Die beiden Methoden, die noch funktionieren
Bis 2023 war es möglich, Google zu “pingen”, um eine neue Sitemap zu melden. Diese Methode funktioniert nicht mehr. Google hat seinen Ping-Endpunkt im Juni 2023 abgeschafft, und URLs vom Typ /ping?sitemap= führen jetzt zu einem Fehler 404.
Zwei Methoden bleiben gültig:
- Die Sitemap über die Google Search Console im Bericht Sitemaps einzureichen. Sie erhalten eine Rückmeldung über die Anzahl der entdeckten URLs und mögliche Formatfehler.
- Die Sitemap in der Datei robots.txt mit der Direktive Sitemap: gefolgt von der URL der Datei zu deklarieren. Dieser Ansatz gewährleistet die automatische Entdeckung, auch ohne manuelle Intervention in der Search Console.
Die Kombination beider bietet das beste Ergebnis. Die Search Console gibt Ihnen ein Diagnose, robots.txt sorgt für die permanente Entdeckung durch alle kompatiblen Roboter.
HTML-Sitemap und XML-Sitemap: zwei Dateien, zwei Zielgruppen
Die XML-Sitemap richtet sich an Suchmaschinen. Sie enthält technische Daten: URL, Änderungsdatum, Sprache. Ihr Format ist strukturiert, um von Maschinen gelesen zu werden.
Die HTML-Sitemap hingegen ist eine klassische Seite Ihrer Website, die für Besucher sichtbar ist. Sie zeigt die Liste Ihrer Kategorien und Seiten in Form von klickbaren Links an. Ihre Rolle besteht darin, die Navigation für Benutzer zu verbessern, die eine bestimmte Seite suchen.
Die XML-Sitemap bleibt die Priorität für die Suchmaschinenoptimierung. Die HTML-Sitemap ist eine nützliche Ergänzung für die Benutzererfahrung, hat jedoch nicht dasselbe Gewicht bei Google. Wenn Sie wählen müssen, womit Sie beginnen, hat die XML-Datei Vorrang.
Was die XML-Sitemap enthalten sollte
Die Regel ist einfach: Schließen Sie nur die Seiten ein, die Sie in den Suchergebnissen sehen möchten. Seiten mit einem noindex-Tag, Anmeldeseiten und Seiten mit internen Suchergebnissen haben in der Sitemap keinen Platz.
- Die Hauptseiten (Startseite, Kategorien, Dienstleistungen, Blogartikel) sollten dort aufgeführt sein.
- Nur die kanonischen URLs: Wenn mehrere URLs zum gleichen Inhalt führen, erscheint nur die kanonische Version in der Datei.
- Bilder und Videos können Gegenstand spezifischer Sitemaps sein, die nützlich sind, um in Google Bilder oder Google Videos zu erscheinen.
Häufige Fehler, die die Effektivität einer Sitemap verringern
Eine schlecht konfigurierte Sitemap kann mehr schaden als nützen. Das Deklarieren von URLs, die einen Fehler 404 zurückgeben, verringert das Vertrauen von Googlebot in Ihre Datei. Wenn der Roboter feststellt, dass die Hälfte Ihrer URLs defekt ist, verlangsamt er das Crawlen des Restes.
Ein weiterer häufiger Fehler: eine Sitemap, die die Größenbeschränkung überschreitet. Das Protokoll erlaubt maximal 50.000 URLs pro Datei, mit einer Größe von nicht mehr als 50 MB. Darüber hinaus muss sie in mehrere Dateien unterteilt und über einen Sitemap-Index zusammengefasst werden.
Verwechseln Sie schließlich nicht Sitemap und Indexierungs-Garantie. Das Einreichen einer URL zwingt Google nicht, sie zu indexieren. Die Suchmaschine entscheidet allein, ob die Seite es wert ist, in ihrem Index aufgeführt zu werden, basierend auf ihrer Qualität und Relevanz. Die Sitemap erleichtert die Entdeckung, nicht das Ranking.
Eine gut gepflegte Sitemap-Datei, die bei jeder tatsächlichen Inhaltsänderung aktualisiert und über die richtigen Kanäle eingereicht wird, bleibt eines der einfachsten technischen Mittel, um die Sichtbarkeit einer Website zu verbessern. Die Arbeit endet nicht mit ihrer Erstellung: Überprüfen Sie regelmäßig ihren Inhalt in der Search Console, um fehlerhafte URLs zu erkennen und die Datei entsprechend anzupassen.
