Der Googlebot kann mit Cookies umgehen. Damit können auch solche Inhalte gecrawlt werden, die nur mit dem Einsatz von Cookies zur Verfügung stehen.

Bisher galt die verbreitete Annahme, dass der Googlebot keine Cookies akzeptiert. Cookies sind kleine Dateien, die von bestimmten Webseiten im Speicher des Browsers abgelegt werden und anhand derer eine Zuordnung von Nutzern möglich ist.

Dass die bisherige Annahme zum Umgang des Googlebots mit Cookies zumindest teilweise falsch ist, zeigt sich an einem Tweet von Googles Gary Illyes vom gestrigen Tag. Laut Illyes verwendet der Googlebot normalerweise keine Cookies, ist aber durchaus dazu in der Lage, wenn erkannt wird, dass die Inhalte nicht ohne Cookie abgerufen werden können:

Diese Information ist hilfreich für Webseitenbetreiber und SEOs, weil sich durch den beschriebenen Umgang des Googlebots mit Cookies mehr Flexibilität ergibt. Das Cookie-Handling muss also nicht mehr zwangsläufig "Google-freundlich" gestaltet werden.

Titelbild © AKS - Fotolia.com

Verwandte Beiträge

Google erkennt und crawlt URLs aus YouTube-Videos

Google erkennt und Crawlt URLs, die in YouTube-Videos vorkommen. Dazu kommt ein eigenständiger Crawler zum Einsatz.

Erst wenn Google einer Webseite vertraut, steigt das Crawl-Budget

Google crawlt neue Webseiten nicht gleich zu Beginn mit voller Kraft. Zuvor muss Vertrauen aufgebaut werden, dass sich das Crawlen überhaupt lohnt.

Google indexiert Seiten auch ohne zu crawlen

Das Crawlen einer Seite ist nicht unbedingt nötig, damit Google sie indexiert. Allerdings werden dabei die Inhalte der Seite nicht übernommen.