Insbesondere bei schon länger bestehenden Websites crawlt Google vor allem bestehende Inhalte, um den Index aktuell zu halten, und weniger neue Seiten.
In der Crawling-Statistik der Google Search Console gibt es den Bereich "Nach Zweck". Hier gibt es die beiden Bereiche "Aktualisieren" und "Auffindbarkeit". Der erste Bereich steht für das Aktualisieren bereits indexierter Seiten, während der zweite Bereich das Entdecken neuer Seiten und Inhalte umfasst.
Insbesondere für Websites, die es schon länger gibt, ist es normal, dass der größte Anteil des Crawlens für die Aktualisierung bestehender Inhalte verwendet wird. Das erklärte John Müller in den Google Search Central SEO Office Hours vom 18. Februar. Der Umfang der Seiten, die Google bereits kenne, wachse mit der Zeit, während der Anteil neu hinzukommender Seiten normalerweise recht konstant sei.
Ausnahmen könne es bei sehr kurzlebigen Websites geben, etwa für lokale Nachrichten, bei denen regelmäßig viele Meldungen hinzukommen und alte Meldungen schnell an Bedeutung verlieren. Dagegen sei es zum Beispiel bei einer E-Commerce-Website, bei welcher die Menge der Inhalte langsam wachse und bei der die meisten Inhalte valide bleiben, so, dass der Anteil des Crawlens zur Aktualisierung höher als der Anteil für das Neuentdecken von Inhalten sei.
Müller sagte außerdem, es gebe keine Empfehlungen von Google, wie man das Verhältnis zwischen "Aktualisieren" und "Auffindbarkeit" beim Crawlen steuern könne.
Titelbilld: Copyright Patrick Daxenbichler - Fotolia.com
Verwandte Beiträge
Google: Für das schnelle Indexieren neuer Inhalte ist die Qualität der einzelnen Seite sowie der gesamten Website wichtig
Um Google dazu zu bringen, neue Inhalte schnell zu indexieren, muss sowohl die Qualität der Seiten stimmen, die indexiert werden sollen, als auch die Qualität der gesamten Website passen.
Google: Seiten mit 4xx-Status verschwenden kein Crawlbudget
Seiten, die einen Statuscode aus der 400er-Reihe senden, gehen nicht zu Lasten des Crawl-Budgets. Eine Ausnahme gibt es aber.
Google: Deutlicher Rückgang des Crawlens für manche Websites beobachtet
Google scheint einige Websites deutlich weniger zu crawlen als noch vor einigen Tagen. Dafür gibt es bestätigte Berichte.
SEO-Newsletter bestellen
Anzeigen
