Google kann RSS-Feeds und XML-Sitemaps, die auf 'noindex' gesetzt sind, trotzdem verarbeiten. Damit lässt sich vermeiden, dass diese in den Suchergebnissen erscheinen.

Gelegentlich kann es passieren, dass Google in den Suchergebnissen Inhalte aus RSS-Feeds und XML-Sitemaps anzeigt. Um dies zu verhindern, kann man diese auf "noindex" setzen. Google kann damit umgehen und die betreffenden Inhalte dennoch verarbeiten. Das erklärte Johannes Müller per Anfrage auf Twitter. Seiner Ansicht nach ist es aber nicht erforderlich, das Indexieren von RSS-Feeds und XML-Sitemaps zu unterbinden, weil diese ohnehin nur selten in den Suchergebnissen erscheinen würden:

Um RSS-Feeds und XML-Sitemaps auf "noindex" zu setzen, muss man im HTTP-Header das X-Robots-Tag entsprechend setzen. Das ist erforderlich, weil weder im RSS-Feed noch in XML-Sitemaps Meta-Tags gesetzt werden können, wie es auf HTML-Seiten möglich ist.

Verwandte Beiträge

Google schlägt XML-Sitemaps als Kernfeature von WordPress vor

Google hat einen Feature-Vorschlag für WordPress eingereicht: Das Content Management System soll zukünftig von Haus aus XML-Sitemaps anbieten. Bisher muss diese Funktion über Plugins eingebracht...

Google: Eine Sitemap ersetzt das Crawlen nicht

XML-Sitemaps können nicht als Ersatz für das Crawlen einer Webseite verwendet werden. Sie dienen lediglich dazu, das Crawlen zu unterstützen.

Google Search Console: Wenn URL angeblich nicht in Sitemap enthalten ist, auf URL-Format achten

Wenn die Google Search Console meldet, eine URL sei zwar indexiert, aber nicht in der XML-Sitemap enthalten, kann das an einem abweichenden URL-Format in der Sitemap liegen.