Um das URL Removal Tool zum Entfernen von Suchergebnissen nutzen zu können, muss Google Zugriff auf die betreffende Website haben. Wie kann das auch für Testsysteme funktionieren, für die kein öffentlicher Zugriff möglich ist?
Es kann vorkommen, dass aus Versehen URLs vom Testserver einer Website indexiert werden. Das ist dann möglich, wenn Google vorübergehend auf die URLs eines Staging Systems zugreifen kann, etwa dann, wenn vergessen wurde, die Testwebsite mit einem vorgeschalteten Login zu schützen.
Sie benötigen SEO-Beratung für Ihre Website?
Doch wie lassen sich solche URLs wieder aus den Suchergebnissen entfernen? Um das URL Removal Tool der Google Search Console nutzen zu können, muss man die betreffende Stage der Website zunächst einmal in der Google Search Console anmelden. Dazu ist eine Verifikation der Website nötig, die man zum Beispiel mittels einer von Google bereitgestellten HTML-Datei erledigen kann.
SEO-Newsletter bestellen
Wie das auch für Staging Systeme funktioniert, hat Gary Illyes von Google in den Search Central SEO Office Hours vom Dezember erklärt. Dazu lässt sich die von Google bereitgestellte Liste von IP-Adressen verwenden, die Google zum Crawlen verwendet. Diese IP-Adressen müssen dann auf eine Whitelist bzw. Allow List genommen werden, so dass von den IPs auf die jeweilige Stage der Website zugegriffen werden kann. So hat Google die Möglichkeit, die Verifizierung für die Search Console vorzunehmen. Anschließend kann das URL Removal Tool verwendet werden, um die entsprechenden Seiten aus den Suchergebnissen zu entfernen.
Illyes wies außerdem darauf hin, dass die Seiten der Test Stage einen Statuscode liefern sollten, der die Indexierung zusätzlicher Seiten verhindert. Das sollte der Status 404 oder 410 sein.
