Google kann RSS-Feeds und XML-Sitemaps, die auf 'noindex' gesetzt sind, trotzdem verarbeiten. Damit lässt sich vermeiden, dass diese in den Suchergebnissen erscheinen.

Gelegentlich kann es passieren, dass Google in den Suchergebnissen Inhalte aus RSS-Feeds und XML-Sitemaps anzeigt. Um dies zu verhindern, kann man diese auf "noindex" setzen. Google kann damit umgehen und die betreffenden Inhalte dennoch verarbeiten. Das erklärte Johannes Müller per Anfrage auf Twitter. Seiner Ansicht nach ist es aber nicht erforderlich, das Indexieren von RSS-Feeds und XML-Sitemaps zu unterbinden, weil diese ohnehin nur selten in den Suchergebnissen erscheinen würden:

Um RSS-Feeds und XML-Sitemaps auf "noindex" zu setzen, muss man im HTTP-Header das X-Robots-Tag entsprechend setzen. Das ist erforderlich, weil weder im RSS-Feed noch in XML-Sitemaps Meta-Tags gesetzt werden können, wie es auf HTML-Seiten möglich ist.

Verwandte Beiträge

Google streicht E-Mail-Funktion für FeedBurner

Google hat Änderungen für den RSS-Service FeedBurner angekündigt. Entfallen soll zum Beispiel die Möglichkeit, Inhalte aus Feeds per E-Mail zu versenden.

Google: Größe und Aufteilung von XML-Sitemap-Dateien ändern das Crawlen von Websites nicht

Bei der Gestaltung von XML-Sitemaps gibt es viele Freiheiten. Der Name der Sitemap-Dateien und die Aufteilung der URLs auf die einzelnen Sitemaps spielen für das Crawlen und die Suche keine Rolle.

Google: alte und nicht mehr aktuelle Sitemaps am besten löschen

Alte Sitemaps mit nicht mehr aktuellen oder nicht mehr benötigten URLs sollten laut Google gelöscht werden. Dies sei ein Teil der Website-Hygiene.