Wir verwenden eine Sitemap für Stack Overflow, aber ich habe gemischte Gefühle.
Webcrawler erkennen Seiten normalerweise über Links innerhalb der Site und von anderen Sites. Sitemaps ergänzen diese Daten, damit Crawler, die Sitemaps unterstützen, alle URLs in der Sitemap abrufen und anhand der zugehörigen Metadaten mehr über diese URLs erfahren können. Die Verwendung des Sitemap- Protokolls garantiert nicht, dass Webseiten in Suchmaschinen enthalten sind, bietet jedoch Hinweise für Webcrawler, um das Crawlen Ihrer Website zu verbessern.
Aufgrund unserer zweijährigen Erfahrung mit Sitemaps ist die Sitemap von Grund auf paradox :
- Sitemaps sind für Websites gedacht, die nur schwer ordnungsgemäß gecrawlt werden können.
- Wenn Google Ihre Website nicht erfolgreich crawlen kann, um einen Link zu finden, aber in der Sitemap gefunden werden kann, wird der Sitemap-Link nicht gewichtet und nicht indiziert!
Das ist das Sitemap-Paradoxon - wenn Ihre Website (aus welchem Grund auch immer) nicht richtig gecrawlt wird, hilft Ihnen die Verwendung einer Sitemap nicht weiter!
Google gibt sich alle Mühe , keine Sitemap-Garantie zu geben :
„Wir können keine Prognosen oder Garantien abgeben , wann oder ob Ihre URLs gecrawlt werden oder hinzugefügt zu unserem Index“ Zitat
"Wir können nicht garantieren, dass wir alle Ihre URLs crawlen oder indizieren. Beispielsweise können wir keine Bild-URLs crawlen oder indizieren, die in Ihrer Sitemap enthalten sind." Zitat
„Einreichen einer Sitemap nicht garantiert , dass alle Seiten Ihrer Website in den Suchergebnissen gekrochen oder enthalten sein“ Zitat
In Anbetracht der Tatsache, dass in Sitemaps gefundene Links lediglich Empfehlungen sind , während auf Ihrer eigenen Website gefundene Links als kanonisch gelten. Es scheint nur logisch , eine Sitemap zu vermeiden und sicherzustellen, dass Google und jede andere Suchmaschine dies auch können Durchsuchen Sie Ihre Website mithilfe der einfachen alten Standardwebseiten, die alle anderen Benutzer sehen.
Bis Sie getan haben , dass , und sind immer schön gespidert und gründlich , so kann Google , dass Ihr sehen eigene Website Links zu diesen Seiten, und wäre bereit , die Links zu kriechen - uh, warum brauchen wir eine Sitemap, wieder? Die Sitemap kann aktiv schädlich sein, da sie Sie davon abhält, sicherzustellen, dass Suchmaschinenspinnen Ihre gesamte Website erfolgreich crawlen können. "Oh, es ist egal, ob der Crawler es sehen kann, wir schlagen nur diese Links in die Sitemap!" Die Realität ist nach unserer Erfahrung genau das Gegenteil.
Das scheint mehr als ironisch, wenn man bedenkt, dass Sitemaps für Websites gedacht sind, die eine sehr umfangreiche Sammlung von Links oder eine komplexe Benutzeroberfläche aufweisen, die schwer zu erkennen sein kann. Erfahrungsgemäß hilft die Sitemap nicht weiter, da Google den Link auf Ihrer Website ohnehin nicht indiziert , wenn er von Google nicht gefunden wird. Wir haben dies immer wieder mit Fragen zum Stapelüberlauf bewiesen.
Liege ich falsch? Sind Sitemaps sinnvoll und verwenden wir sie nur falsch?