Nach dem Durchführen von größeren Änderungen auf einer Webseite kommt es meist zu verstärkten Crawling-Aktivitäten durch Google. Betroffen davon sind vor allem bereits indexierte URLs.
Umfassende Änderungen, die Auswirkungen auf die gesamte Webseite haben, können einen Anstieg der Aktivitäten des Googlebots auslösen. Wenn zum Beispiel Seiten oder Ressourcen, die zuvor blockiert waren, für den Crawler freigegeben werden, kann das dazu führen, dass sich die Zahl der pro Tag vom Googlebot abgerufenen Seiten für einige Zeit stark erhöht.
In einem aktuellen Webmaster-Hangout erklärte John Müller, warum das passiert und warum vor allem bereits indexierte URLs erneut gecrawlt werden.
Google versucht, seinen Index so aktuell wie möglich zu halten. Erkennt der Googlebot, dass es signifikante Änderungen auf einer Webseite gibt, so wird versucht, die bekannten URLs so schnell wie möglich erneut zu crawlen, um diese Änderungen im Index zu berücksichtigen. Laut Müller gehören zu solchen Änderungen beispielsweise strukturierte Daten, Anpassungen an Canonicals und Redirects sowie Änderungen an den URLs.
Manchmal kann es jedoch auch unabhängig von größeren Änderungen zu einem plötzlichen Anstieg der Crawling-Aktivitäten kommen. Ein Zusammenhang mit durchgeführten Änderungen muss also nicht immer bestehen.
Je nachdem, wie Google den Wert und die Qualität einer Seite einschätzt, kann es kürzer oder länger dauern, bis sich Änderungen auf einer Webseite durch ein erneutes Crawlen und die Berücksichtigung im Index in den Suchergebnissen auswirken. Wartezeiten von mehreren Monaten bis zu einem halben Jahr sind möglich.
Titelbild: Google
Artikelveröffentlichungen auf starken Magazinen und Blogs
Wir kooperieren mit unzähligen Verlagen und Bloggern und können daher auf über 4000 Blogs zu fast allen Themengebieten Artikelplätze anbieten:
- - Nachhaltiger Linkaufbau, kein SEO-Netzwerk
- - Hohe Sichtbarkeitswerte, keine expired Domains
- - Einmalzahlung, keine Vertragsbindung
Für jede Artikelveröffentlichung erstellen wir hochwertigen Content mit mindestens 400 Wörtern und publizieren den Artikel mit einem DoFollow-Bachlink zu deiner Seite auf einem Magazin oder Blog deiner Wahl.
Verwandte Beiträge
Onlineshops: Googlebot kann Produkte in den Warenkorb legen
Unter dem Namen 'John Smith' legt der Googlebot Produkte in den Warenkorb, um die Preise zu überprüfen. Das kann zu ungewünschten Effekten bei E-Commerce-Websites liegen.
Googlebot crawlt jetzt mit Chrome 83
Google verwendet jetzt zum Crawlen Chrome 83. Damit entspricht die vom Googlebot genutzte Chromium-Version derjenigen der aktuellen Produktiv-Version des Chrome-Browsers.
Googlebot schickt in 'extrem seltenen Fällen' Formulare ab
Beim Crawlen kann der Googlebot auch Formulare abschicken. Allerdings passiert das laut Google sehr selten. Wenn es aber vorkommt, kann das Auswirkungen auf das Crawlen haben.
