Spam?

In meinem Counter sind mir Bots aufgefallen, die offensichtlich nicht mehr alle Tassen im Schrank haben. Die Yahoo-Bots kommen immer in Gruppen, bevorzugt Nachts und crawlen so an die 50 Seiten. Daran hab ich mich ja schon gewöhnt.
Aber neuerdings tauchen Crawler auf, die sich als Yahoo-Bot ausgeben, aber eine andere Namensstruktur aufweisen (kein inktomisearch.com). Der letzte trieb es auf die Spitze und crawlte über den ganzen Tag verteilt knapp 900 Seiten. Dabei spielte er völlig willkürlich mit meiner URI-Struktur herum und fand Seiten, die so gar nicht verlinkt sind. Viele Seiten wurden mehrfach besucht. Graphisch sieht das dann so aus:

stats

Die Besucherzahlen bleiben unverändert, aber die Seitenaufrufe steigen rapide an. Ich glaub, ich bau bald mal so ne Botfalle.

Einen Kommentar hinterlassen