Google: beim Testen auf neuen Index AMP-Seiten nicht vergessen

Google Wenn man testen möchte, ob die eigene Webseite bereits in den neuen Google-Index aufgenommen wurde, und eine Auswertung der Logfiles vornimmt, muss man dabei AMP-Seiten herausrechnen, denn auch diese werden vom mobilen Googlebot besucht.

Um festzustellen, ob eine Webseite bereits in Googles neuen "Mobile First"-Index umgezogen wurde, gibt es einen einfachen Test. Dazu müssen lediglich die Logdateien des Webservers ausgewertet werden. Ist die Zahl der Zugriffe durch den mobilen Googlebot größer als die Zahl der Zugriffe durch den Googlebot für Desktopseiten, ist dies ein klares Zeichen dafür, dass eine Seite bereits im neuen Index gelistet ist.

Für Webseiten mit einer zusätzlichen AMP-Variante muss aber zuvor eine Bereinigung der Daten stattfinden, denn der mobile Googlebot crawlt auch die AMP-Seiten, was zu einer Verfälschung der Auswertung führen kann. Darauf hat Johannes Müller heute per Twitter hingewiesen:

Zum Prüfen der Logfiles schlägt Quentin Adt folgende Kommandos vor. Dabei werden AMP-Seiten ausgeschlossen:

grep '66.249.' MyLogFile.log |grep Googlebot|grep -v 'AMPtagInYourURLs'|grep -v ' Mobile '|wc -l
grep '66.249.' MyLogFile.log |grep Googlebot|grep -v 'AMPtagInYourURLs'|grep ' Mobile '|wc -l

Wenn 2. größer ist als 1., befindet sich die geprüfte Seite bereits im neuen Index. Für eine vollständige Analyse sollte man jedoch sämtliche IP-Bereiche testen, unter denen der Googlebot auftritt. Neben dem Bereich 66.249 sind das außerdem