Der Sitemap-Leitfaden: XML-Sitemap und Sitemap-Generator-Tools

In meinen ersten Wochen bei Atlassian war ich auf der Suche nach einem schnellen Erfolg, um besser im Unternehmen Fuß zu fassen und für SEO zu werben. Also habe ich unsere Website überprüft. Dabei stellte ich fest, dass keine XML-Sitemap vorhanden war. Was für ein schöner Quick Win!

Ich ging zu den Entwicklern und bat sie, im Content-Management-System die Sitemap-Funktion zu aktivieren. Zu meiner Überraschung sagten sie, das sei nicht möglich. Ich war sprachlos.

Nach einigem Nachdenken erinnerte ich mich daran, dass Screaming Frog eine XML-Sitemap-Funktion hatte, also scrapte ich die Website und lud das Ergebnis als XML-Sitemap hoch.

Google erfasste sie binnen Sekunden, und wir sahen in den nächten Tagen einen spürbaren Einfluss auf unseren Traffic.

Die Moral von der Geschichte ist, dass XML-Sitemaps wichtig sind und oft unterschätzt werden. Sie sind Teil der  technischen SEO und sind für die Webseite sehr wichtig.

Wichtig: Eine Anleitung, wie man eine XML-Sitemap mit einem XML-Sitemap Generator erstellt und hochlädt, findest du weiter unten.

Was ist eine XML-Sitemap? 

XML-Sitemap ist eine digitale Karte, mit deren Hilfe Google erkennt, welche Seiten zu Ihrer Website gehören und wie oft sie aktualisiert werden.

Google erklärt im Hilfecenter

John Müller (Google) erklärt in diesem kurzen Video, wieso die Sitemaps so wichtig sind.

Warum ist eine XML-Sitemap wichtig?

Sitemaps sind für Googlebot die zweitwichtigste Methode, Links aufzufinden.

Laut Gary Illyes sind XML-Sitemaps die zweitwichtigste Quelle für URLs, die Googlebot crawlt, nach Hyperlinks und früher entdeckten URLs. Das ist massiv und nicht zu unterschätzen!

Jede Website sollte eine XML-Sitemap haben. Dies ist besonders wichtig für:

• Große Websites
• Neue Websites
• Websites mit vielen nicht verlinkten Unterseiten
• Websites mit vielen Bildern und Videos

Während Sie mit der robots.txt-Datei Teile Ihrer Website von der Indexierung durch Suchmaschinen ausschließen können, bewirken XML-Sitemaps das Gegenteil. Lesen Sie zunächst was eine Robotx.txt Datei ist, wenn Sie es noch wissen. Sie helfen Suchmaschinen dabei, neue Seiten zu entdecken – auch wenn diese nicht von der Hauptseite aus verlinkt sind.

Google begann 2005 damit, XML-Sitemaps zum Crawlen heranzuziehen, gefolgt von weiteren Suchmaschinen wie MSN oder Yahoo. 2006 beschlossen die drei Vorreiter das Sitemap-Protokoll, auf dem die Technik noch heute beruht. Inzwischen wird sie über das Auffinden von URLs hinaus für weitere Zwecke verwendet.

XML-Sitemaps sind nicht mit HTML-Sitemaps zu verwechseln. XML-Sitemaps sind für Besucher unsichtbare XML-Dateien, die nur für Google interessant sind – und für SEO-Verantwortliche, die einen Blick auf wichtige Seiten ihrer Mitbewerber werfen wollen (zwinker, zwinker).

Unterschied XML-Sitemap und HTML-Sitemap

HTML-Sitemaps sind dagegen (manchmal hübsch gestaltete) Listen interner Links, die den PageRank von der Startseite an wichtige Unterseiten weitergeben, als Crawl-Verteilknoten dienen und den Benutzern die Navigation erleichtern. Ja, Sie sollten beide haben.

Google kann Sitemaps im XML-Format schnell analysieren, um neue URLs zu finden. XML – eXtensible Markup Language – ist datensparsam, plattformunabhängig und wurde für die Speicherung von Daten entwickelt.

Wie kann man die XML-Sitemap prüfen?

Der einfachste Weg, um Ihre Website auf das Vorhandensein einer Sitemap zu prüfen, ist ein Blick in den Abschnitt "Sitemaps" in der Google Search Console oder Bing Webmaster Tools. Die meisten Suchmaschinen suchen in der robots.txt-Datei Ihrer Website nach dem Eintrag (oder mehreren) "Sitemap:", gefolgt von dem Pfad der Sitemap-Datei. Alternativ können Sie Ihre Sitemap auch direkt an Google, Baidu, Bing und Yandex senden.

Mindestanforderungen für die Nutzung einer XML-Sitemap

Achten Sie darauf, alle Anforderungen zu erfüllen, damit Ihre XML-Sitemaps optimal funktionieren. Eine XML-Sitemap sollte ...

• nur kanonische URLs mit einem Statuscode von 200 enthalten.
• bis zu 200.000 URLs pro Sitemap und maximal 50.000 Sitemaps pro Index-Sitemap umfassen.
• in der robots.txt verzeichnet sein.
• BUTF-8 codiert sein.
• im GZ-Format komprimiert sein.
• nicht größer als 50 Megabyte sein oder mehr als 50.000 URLs enthalten.

Sie können und sollten jedoch noch mehr tun, um XML-Sitemaps zu ihrem vollen Potenzial zu nutzen. Zum Beispiel können Sie Google signalisieren, welche URLs wichtig sind, indem Sie nur wichtige Seiten in Ihre XML-Sitemaps aufnehmen und diese häufig aktualisieren.

Die meisten Content-Management-Systeme verfügen über eine Funktion zur automatischen Aktualisierung von Sitemaps, wenn eine neue URL erstellt oder eine vorhandene Seite geändert wird. Für Google können die Aktualisierungshäufigkeit der Sitemap selbst und die lastmod-Tags einzelner Seiten Signale für Aktualität sein. Ob dies für das Ranking wichtig ist, hängt von der Seite und dem Kontext ab.

Stellen Sie sich eine XML-Sitemap vor wie einen Stadtplan für Touristen, wobei Ihre Website die Stadt und Google der Tourist ist. In diesem Fall werden Sie sicherstellen wollen, dass nur die wichtigen Gebäude und nicht sämtliche Adressen verzeichnet sind.

Daher sollten unwichtige Seiten nicht enthalten sein. Beispiele sind Seiten mit den Datenschutzrichtlinien oder "Über uns"-Seiten. Diese sollten zwar indiziert werden, müssen jedoch nicht häufig gecrawlt werden und spielen keine wichtige Rolle für SEO.

XML-Sitemap für große Websiten generieren

Große Websites wie Nachrichtenplattformen sollten Index-Sitemaps verwenden, die (bis zu 50.000) normale Sitemaps enthalten und bis zu 50 MB groß sein dürfen. Sie sind wie ein XML-Sitemap-Mutterschiff, das viele kleinere Sitemaps enthält. Große Websites benötigen sie, da bei ihnen nicht alle URLs in eine einzelne Sitemap passen. Sie sollten ohnehin nicht versuchen, alles in eine einzige Sitemap aufzunehmen.

Am besten hat sich bewährt, diese Sitemaps nach Seitentypen oder Themen zu strukturieren. In der Praxis könnten Sie eine dedizierte XML-Sitemap pro Unterverzeichnis oder Seitentemplate erstellen, um sich ein Bild von technischen und Indexierungsproblemen Ihrer Website zu verschaffen.

Es gibt spezielle XML-Sitemap-Typen für bestimmte Zwecke. Websites, die stark mit Rich Media arbeiten (etwa Pinterest oder YouTube), profitieren von Bild- oder Video-Sitemaps. Medienplattformen sollten Nachrichten-Sitemaps einsetzen.

Bilder-Sitemaps erhöhen die Chance, dass Ihre Website in der Google-Bildsuche gefunden wird. Eine dedizierte Bilder-Sitemap ist dazu nicht zwingend nötig. Sie können Bilderweiterungen auch in Ihrer regulären Sitemap verwenden.

So sehen Bilderweiterungen aus ( XML-Spezifikationen):

Video-Sitemaps funktionieren nach demselben Prinzip: Erstellen Sie entweder eine dedizierte Sitemap oder fügen Sie Ihrer regulären Sitemap Erweiterungen hinzu:

Seien Sie jedoch vorsichtig mit den Metadaten, die Sie zu Video-Sitemaps oder -Erweiterungen hinzufügen.

Google erklärt: "Google verwendet statt dem von Ihnen in der Sitemap angegeben Text möglicherweise Text von der Zielseite des Videos, wenn der Seitentext als nützlicher als die Informationen in der Sitemap erachtet wird." Hier ist von dem Text die Rede, der durch Ihre Beschreibung geliefert wird. Neben einer Beschreibung können Sie Google eine Miniaturansicht, die Videolänge, eine Bewertung, eine Angabe zur Familienfreundlichkeit und weitere Informationen liefern ( hier eine vollständige Liste der XML-Sitemap-Metadaten für Videos). Für Websites, die häufig Videos verwenden, sind diese Möglichkeiten sicher sinnvoll. Für alle anderen sind sie eher optional.

Für Nachrichten-Sitemaps gilt die Besonderheit, dass Sie immer eine separate Nachrichten-XML-Sitemap bereitstellen sollten. Google bietet in diesem Fall keine Erweiterungen an. Mithilfe von Nachrichten-Sitemaps kann Google neue Artikel schneller entdecken und in den Suchergebnissen anzeigen. Dies ist in der Medienbranche eine besondere Herausforderung, da sie in großem Umfang Inhalte produziert. Obwohl Google angibt, dass Ressourcen mit Nachrichten-Sitemaps nicht bevorzugt werden, helfen diese, aktuelle Nachrichten schneller in Google News zu platzieren.

Nachrichten-Sitemaps stellen bestimmte Anforderungen:

• Sie enthalten Artikel, die nicht älter als 2 Tage sind.

• Es sollten nicht mehr als 1.000 neue Einträge gleichzeitig zu einer bestehenden Sitemap hinzugefügt werden.

• Bestehende Sitemaps sollten bei Aktualisierungen der verzeichneten Artikel ebenfalls aktualisiert werden.

Sie können XML-Sitemaps auch verwenden, um bestimmte Meta-Tags für Google zu definieren und anzugeben. Ein Beispiel sind Hreflang-Attribute; Sie haben die Möglichkeit, alternative Sprachversionen Ihrer Seiten in einer Sitemap anzugeben ( Richtlinien):

Nach Auskunft von John Mueller ignoriert Google das Prioritätsattribut in XML-Sitemaps, beachtet jedoch lastmod. Google bestimmt die Priorität Ihrer Seiten selbst, wahrscheinlich nach Beliebtheit und Autorität. Das Tag lastmod gibt jedoch an, wann sich eine URL das letzte Mal geändert hat, was für Google sehr interessant ist.

Nach John Mueller müssen Sie außerdem keine XML-Sitemaps für AMP-URLs hinzufügen.

XML-Sitemap Generator Anleitung: Sitemap erstellen und hochladen

Hier ist eine kurze Anleitung, wie man eine XML-Sitemap online generiert.

1. Gehe zu xml-sitemaps.com

2. Gebe dort deine Domain ein und klicke auf weitere Optionen. Achte auf das richtige Protokoll!

3. Stelle die automatische Priorisierung ab, wie auf dem Screenshot.

4. Während des Vorgangs siehst du den Live-Bericht.

5. Nachdem alles abgeschlossen wurde, lade die erstellte Datei herunter.

6. Entpacke diese. Du musst 5 Dateien haben.

• sitemap.xml: Dies ist deine Sitemap, die du brauchst
• sitemap.xml.gz: Stark komprimierte XML-Sitemap. Suchmaschinen behandelt diese genauso wie die unkomprimierte.
• sitemap.html: Aufrufbare und übersichtliche HMTL-Sitemap 
• urllist.txt: Auflistung aller URLs in einer Textdatei
• ror.xml: XML basierte Sitemap. Für RSS 

7. Lade die sitemap.xml in das Root-Verzeichnis deiner Website (mit SFTP/FTP oder per Browser) hoch

8. Öffne die Google Search Console und gebe dort die Adresse der XML-Sitemap ein.

9. Fertig. 

XML-Sitemap-Generatoren und Tools

Die meisten Content-Management-Systeme bringen einen vorgefertigten XML-Sitemap-Generator mit. Einige tun dies jedoch nicht. In diesem Fall können Sie zum Erstellen einer XML-Sitemap eines von vielen Online-Tools von Drittanbietern nutzen.

Die besten Sitemap- und XML-Sitemap-Generatoren

Dies sind meine persönlichen Favoriten unter den XML-Sitemap-Generatoren auf dem Markt.

 Wordpress-Plugins und Sitemap-Generatoren

Haben Sie weitere Tipps zu XML-Sitemaps oder können Sie Tools empfehlen? Wir freuen uns auf Ihre Kommentare.