Mithilfe einer Sitemap-Datei können Suchmaschinen neue und aktualisierte URLs auf Ihrer Website finden. Insbesondere wenn Ihre Website ziemlich groß ist, kann dies dazu beitragen, dass sie sich auf den neuen und aktualisierten Inhalt konzentrieren können, anstatt blind durch alles zu kriechen, um festzustellen, ob sich etwas geändert hat. Dies kann dazu führen, dass neue Inhalte viel schneller gefunden werden. Dies ist insbesondere dann bemerkenswert, wenn die Website größer oder komplexer ist.
Insbesondere bei Google (ich arbeite bei Google; ich weiß nicht, wie andere Suchmaschinen damit umgehen) geschieht Folgendes:
- Finden Sie die Anzahl der indizierten URLs für Ihre Website: Diese Statistiken werden täglich neu berechnet und sind sehr genau. Sie finden diese auf der Detailseite für Sitemaps .
- Entdecken Sie Probleme mit der Kanonisierung: Wenn die Zahlen dort nicht übereinstimmen , ist dies häufig ein Zeichen dafür, dass Sie in der Sitemap-Datei URLs angeben, die nicht mit den beim Crawlen gefundenen übereinstimmen. Das ist normalerweise ein Zeichen dafür, dass Sie an der Kanonisierung arbeiten müssen .
- Hilfe bei der Kanonisierung: Wenn wir auf Ihrer Website mehrere URLs mit identischem Inhalt finden, geben wir jeder URL, die in einer Sitemap aufgeführt ist, einen zusätzlichen Vorteil, auch wenn Sie keine anderen Kanonisierungsmethoden verwenden.
- Suchen nach schlecht indizierten Teilen Ihrer Website: Diese Anzahl wird pro Sitemap-Datei angegeben. Sie können also separate Sitemap-Dateien für logische Abschnitte Ihrer Website erstellen, um Bereiche zu ermitteln, in denen Google nicht so viel indiziert, wie Sie möchten.
- Durchforstungsfehler priorisieren: Im Abschnitt Durchforstungsfehler werden URLs, die in Sitemaps-Dateien angegeben wurden, separat aufgelistet. Da Sie diese URLs speziell angegeben haben, gehen wir davon aus, dass Sie sie indizieren möchten und dass alle dort auftretenden Crawling-Fehler wichtig sind.
Darüber hinaus können Sie in Sitemaps-Dateien mehrere Erweiterungen verwenden (z. B. für Bilder, Videos, Nachrichten oder Internationalisierung). Diese Erweiterungen sind alle optional.
Bei den meisten Websites ist das sichtbarste Element von Sitemaps-Dateien, dass die Anzahl der indizierten URLs angezeigt wird. Es kann ungefähr einen Tag dauern, bis sie angezeigt werden. Wenn Sie also zum ersten Mal eine Sitemap eingereicht haben, müssen Sie möglicherweise etwas Geduld mitbringen. Während andere Methoden (z. B. site: -query) sehr, sehr grobe Näherungswerte darstellen, ist diese Anzahl äußerst genau.
Bearbeitet, um hinzuzufügen: Eine andere Sache, die ich persönlich in Bezug auf Sitemaps sehr nützlich finde, ist, dass Sie, wenn Sie sie nicht direkt mit Ihrem CMS generieren, ausnahmslos viel darüber herausfinden, wie Ihre Website gecrawlt werden kann und welche Art von URLs entdeckt werden während dieses Prozesses. Ich habe viele Fälle erlebt, in denen das Crawlen einer Website mit einem Tool auf Ihrer Seite (z. B. einem Sitemaps-Generator) Probleme aufwirft, die Sie möglicherweise übersehen, z. B. Sitzungs-IDs in URLs, Duplizieren von Inhalten durch URL-Unterschiede, unendliche Leerzeichen (z als endlose Kalender) oder sogar Teile einer Site, die überhaupt nicht verlinkt sind.