Google erkennt das Meta-Robots-Tag 'noindex' auch dann, wenn es per JavaScript gesetzt wurde - allerdings mit einer zeitlichen Verzögerung. Umgekehrt funktioniert es jedoch nicht: Wenn ein 'noindex' per JavaScript entfernt wird, kann Google dies nicht berücksichtigen.

Immer mehr Webseiten verwenden JavaScript, um Inhalte darzustellen oder einfach nur dazu, um Meta-Daten zu ergänzen, etwa per Google Tag Manager.

Ein Bestandteil der Meta-Daten auf einer Webseite ist das Meta-Robots-Tag. Dieses spielt eine entscheidende Rolle, wenn es um die Frage geht, ob Google und andere Suchmaschinen eine Seite indexieren und den Links auf der Seite folgen sollen. Daher ist es wichtig, dass die Crawler diese Daten auch dann erkennen können, wenn diese per JavaScript gesetzt werden.

Hier muss man unterscheiden: Wenn auf einer Seite ein "noindex" per JavaScript gesetzt wird, kann Google dies erkennen, allerdings erst mit einigen Tagen Verzögerung, wie Johannes Müller in einem der letzten Webmaster-Hangouts erklärt hat. Das liege daran, dass Google zunächst das initiale HTML abrufe und das JavaScript erst später ausführe. So könne es also passieren, dass eine neue Seite mit einem per JavaScript gesetzten "noindex" zunächst indexiert und dann später wieder aus dem Index entfernt wird.

Umgekehrt funktioniert es laut Müller nicht: Seiten, bei denen im HTML ein "noindex" gesetzt ist, welches per JavaScript entfernt wird, können von Google nicht indexiert werden. Google stößt zuerst auf das "noindex" im HTML und sieht dann keine Veranlassung mehr, das JavaScript der Seite auszuführen.

Zusammengefasst: "noindex" per JavaScript funktioniert (mit Einschränkungen), der umgekehrte Weg funktioniert nicht.

Titelbild: Paul Pirosca - Fotolia.com

Verwandte Beiträge

Google aktualisiert Doku zu JavaScript und 'noindex'

Google hat die Dokumentation zur Manipulation von Meta Robots Tags per JavaScript aktualisiert und warnt nun ausdrücklich davor, dass Seiten mit initialem "noindex" nicht gerendert werden.

Google: 'noindex' in robots.txt wird nach dem 1. September keinen Schaden anrichten

Wer nach dem 1. September 'noindex'-Regeln in der robots.txt belässt, muss keinen Schaden für die Darstellung in den Google-Ergebnissen fürchten. Einen Nutzen bringt dies allerdings auch nicht.

Google fordert Website-Betreiber zum Entfernen von 'noindex' aus robots.txt auf

Google versendet Benachrichtigungen an Webmaster, die 'noindex' in ihrer robots.txt verwenden. Zu Anfang September wird Google 'noindex' in der robots.txt nicht mehr unterstützen.