Hallo Leute,
ein (Google-)Bot griff neulich so an die >50x auf ein und dasselbe Bild zu, und das nicht nur bei einem, sondern bei fast allen. Da ich eine Spieleseite betreibe, waren das nicht wenige, und die Seite zeitweise nicht erreichbar.
Als Notbremse habe ich den Bot gesperrt. Dazu gab es heute Lack vom Webmaster.
Frage:
Wie kann ich ohne mod_rewrite alle GIFs der Seite für Bots sperren? Unterseite und weiterführende Links müssen verfolgt werden können, also das meta-Tag nofollow verbietet sich.
Das Separieren der Bilder von den Spielen ist ebenfalls nicht sinnvoll, da die Verzeichnisse bei Bedarf als funktionsfähige Einheit gepackt und versendet werden.
Am liebsten wäre mir eine Lösung via robots.txt, sowas wie
Disallow: /*.gif
das ist aber wohl kein Standard.
so long,
Blue Jay
Lesezeichen