Wenn ich Inhalt hinter einem POST-Formular habe (in meinem Fall ein Auswahlfeld), können Googlebot oder andere Suchmaschinenspinnen den Inhalt hinter diesem Formular crawlen?
Wenn ich beispielsweise 4 Übersetzungen einer Seite hätte und die Sprachauswahl ein POST-Formular für dieselbe URL wäre, das dann zur sprachspezifischen URL umgeleitet würde, könnte Googlebot dann die "anderen" Sprachen crawlen?
Antworten:
Der Googlebot kann Formulare senden , dies ist jedoch im Allgemeinen nicht der Fall, es sei denn, er kann einen Grund dafür erkennen .
Wenn Ihre Übersetzungen über die Links von AJAX erstellt und ordnungsgemäß erstellt wurden, kann Googlebot das Formular sehr gut senden, um zu sehen, wie die Ergebnisse aussehen würden. Dieses Verhalten (insbesondere bei POST) ist jedoch nicht garantiert, und Sie sollten wahrscheinlich GET verwenden, um den Robotern den Zugriff zu erleichtern.
Bing tut es absolut. Bevor ich es nicht sagte, würde ich ständig sowohl ein Kontaktformular als auch ein Umfrageformular einreichen. Ich wusste, dass es Bingbot war, weil ich $ _SERVER ['HTTP_USER_AGENT'] in die $ _POST-Informationen aufgenommen habe. Keine andere Spinne hat diese Formulare jemals eingereicht.