Beim durchschauen der error_logs vom Apache hab ich mich damals natürlich gewundert. noexist_*.html gibt nen 404 Error an nen GoogleBot.

Wo kommt das denn her und was hat es damit auf sich?

Nach ein wenig Recherche stellte ich fest: Google Webmaster Tools ist “schuld”.

Wenn man dort seine Website bestätigen möchte, schickt Google nicht nur einen Bot, der überprüft, ob “google_*.html” existiert, nein, es wird auch geschaut, ob nen 404 bei “noexist_*.html” zurückgegeben wird. Warum? Da diese Datei nicht existieren sollte, wird so sichergestellt, dass die zu überprüfende Website nicht auf jede Anfrage einen 200er (“erfolgreich”) zurückgibt. Dies könnte zum Beispiel bei einer Fehlkonfiguration des Servers oder schlechter Programmierung geschehen. Das wiederum könnte ausgenutzt werden, um fremde Seiten in seine Webmaster Tools zu bekommen und ggf. Schaden anzurichten.