» Hallo
» Wie kann ich den Yahoo Spider aussperren?
» gruß Marco
Also normalerweise einfach
User-agent: slurp
Disallow: /
in die robots.txt
Wenn du den bot aber hart sperren möchtest machst du folgendes.
Erst "slurp" in die Blacklist.txt
und dann muss du bei jeder deiner Seiten eine prüfung machen.
Folgende PHP Code muß man dann irgendwo im Header Bereich einbinden
<?php
require ('spider-trap/settings.php');
require ('spider-trap/functions.php');
require ('spider-trap/lang/language_'.$spider_conf['lang'].'.php');
if (is_blacklisted (getip(), $_SERVER['HTTP_USER_AGENT'])) {
exit;
}
?>
Suche noch Programmierer für das Spider Trap Team, die mir helfen die Software weiterzuentwickeln.
|
