Wie kann man verhindern, dass eine Seite indiziert wird ?
Mit der Zunahme der technischen Ressourcen, die von großen Suchmaschinen eingesetzt werden, sind diese heute in der Lage, neue Seiten sehr schnell zu indizieren.
Google scheint über die aktuell leistungsfähigsten Technologien und Ressourcen zu verfügen. Es wird also immer schwieriger, nicht indexiert zu werden.
Durch seine zahlreichen Dienste, die von Millionen von Menschen genutzt werden (wie Analytics, Chrome usw.), kann Google sehr effizient und schneller bis dato unbekannte URLs entdecken und sammeln.
Es reicht von daher nicht aus sicherzustellen, dass kein Link auf eine (verwaiste) URL zeigt, damit diese Seite nicht auf den Ergebnisseiten einer Suchmaschine auftaucht.
Auch die Verwendung von robots.txt ist keine echte Lösung. Diese Auszeichnung hindert eine Suchmaschine nämlich nicht daran, die URL der Website in den Suchergebnissen anzuzeigen.
In diesem Fall schlägt eine Suchmaschine wie Google die einfache URL ohne Titel oder Meta-Description vor. Es gibt aber tatsächlich eine Lösung, um eine neue Website oder einen neuen Service, die oder der mit großem Tamtam am D-Day starten soll, zu verstecken.
Die Verwendung des Meta-Tags "noindex" hilft, eine Indizierung zu unterbinden.
Die beste Lösung allerdings ist, einen geschützten Zugang mit einem Passwort einzurichten oder den Zugriff nur für bestimmte IP-Adressen zuzulassen.
