Newsletter

  • Immer informiert über die neusten Trends, Webseiten und Tutorials! Einfach hier für den monatlichen Newsletter anmelden.
  •  Eintragen
  •  Austragen

Login

Umfrage

  • Bloggt Ihr?
  •  
  • ja
  • nein
  • bloggen?
  •  

BlackBeats

BlackBeats.fm Stream
- ONAIR -
Hip Hop Musik vom feinsten

Blackbeats FM

Linktipps

» Startseite » Server- und Sicherheits - Tutorials

Emailharvester und unerwünschte Bots mit .htaccess sperren

 
So gennante Emailharvester die das Netz nach E-Mail Adressen durchsuchen verursachen nur unnötig Traffic und man sollte sowieso solche Tools aussperren, dies geht am besten mit .htaccess.




Dazu schreibt man einfach nur folgendes in die .htaccess (Wer nicht weiß wie genau das geht, fragt hier nach ;))

Bei folgendem Beispiel wird einfach eine Fehlermeldung zurückgegeben wenn eine der Regeln zutrifft, so als würde die Seite gar nicht existieren.
Eine andere Möglichkeit ist es die Bots bewusst zu stören indem man ihnen falsche Mailadressen übergibt und somit dem Spammer die Datenbank zumüllt.

  1.  RewriteEngine On
  2.  RewriteBase /
  3.  RewriteCond %{REMOTE_ADDR} ^64.140.49.6([6-9])$ [OR] # Turnitin spybot
  4.  RewriteCond %{HTTP_USER_AGENT} anarchie [NC,OR] # OD
  5.  RewriteCond %{HTTP_USER_AGENT} Atomz [OR] # rude bot
  6.  RewriteCond %{HTTP_USER_AGENT} cherry.?picker [NC,OR] # spambot
  7.  RewriteCond %{HTTP_USER_AGENT} crescent [NC,OR] # OD
  8.  RewriteCond %{HTTP_USER_AGENT} "^DA d.d+" [OR] # OD
  9.  RewriteCond %{HTTP_USER_AGENT} "DTS Agent" [OR] # OD
  10.  RewriteCond %{HTTP_USER_AGENT} e?mail.?(sweeper|harvest|collect|wolf) [NC,OR] # spambot
  11.  RewriteCond %{HTTP_USER_AGENT} express [NC,OR] # OD
  12.  RewriteCond %{HTTP_USER_AGENT} extractor [NC,OR] # OD
  13.  RewriteCond %{HTTP_USER_AGENT} FlickBot [OR] # rude bot
  14.  RewriteCond %{HTTP_USER_AGENT} FrontPage [OR] # stupid user trying to edit my site
  15.  RewriteCond %{HTTP_USER_AGENT} "efp@gmx.net" [OR] # rude bot
  16.  RewriteCond %{HTTP_USER_AGENT} grabber [NC,OR] # OD
  17.  RewriteCond %{HTTP_USER_AGENT} imagefetch [OR] # rude bot
  18.  RewriteCond %{HTTP_USER_AGENT} httrack [NC,OR] # OD
  19.  RewriteCond %{HTTP_USER_AGENT} "Indy Library" [OR] # spambot
  20.  RewriteCond %{HTTP_USER_AGENT} "^Internet Explore" [OR] # spambot
  21.  RewriteCond %{HTTP_USER_AGENT} ^IE d.d Compatible.*Browser$ [OR] # spambot
  22.  RewriteCond %{HTTP_USER_AGENT} "LINKS ARoMATIZED" [OR] # rude bot
  23.  RewriteCond %{HTTP_USER_AGENT} "Microsoft URL Control" [OR] # spambot
  24.  RewriteCond %{HTTP_USER_AGENT} "mister pix" [NC,OR] # rude bot
  25.  RewriteCond %{HTTP_USER_AGENT} ^NG [OR] # unknown bot
  26.  RewriteCond %{HTTP_USER_AGENT} net.?(ants|mechanic|spider|vampire|zip) [NC,OR] # OD
  27.  RewriteCond %{HTTP_USER_AGENT} nicerspro [NC,OR] # spambot
  28.  RewriteCond %{HTTP_USER_AGENT} ninja [NC,OR] # Download Ninja OD
  29.  RewriteCond %{HTTP_USER_AGENT} NPBot [OR] # NameProtect spybot
  30.  RewriteCond %{HTTP_USER_AGENT} PersonaPilot [OR] # rude bot
  31.  RewriteCond %{HTTP_USER_AGENT} snagger [NC,OR] # OD
  32.  RewriteCond %{HTTP_USER_AGENT} Sqworm [OR] # rude bot
  33.  RewriteCond %{HTTP_USER_AGENT} SurveyBot [OR] # rude bot
  34.  RewriteCond %{HTTP_USER_AGENT} tele(port|soft) [NC,OR] # OD
  35.  RewriteCond %{HTTP_USER_AGENT} TurnitinBot [OR] # Turnitin spybot
  36.  RewriteCond %{HTTP_USER_AGENT} vayala [OR] # dumb bot
  37.  RewriteCond %{HTTP_USER_AGENT} zeus [NC]
  38.  RewriteRule .* /blocked.php [F,L]
Natürlich kann man diese Liste unendlich erweitern und immer wieder aktualisieren, diese ist die, die ich verwende.


Fragen? Probleme? Keine Antworten? Hilfe finden Sie im Webmaster Forum!
Diese Artikel könnten Sie auch interessieren:
Spammer täuschen und bremsen
Captcha - Was ist das und wobei soll es helfen?
Traffic sparen mit .htaccess als Bilder-Schutz
Status Codes beim HTTP-Response