Webseiten-Infos.de - Kommentare zu: Bots mittels User Agent blockieren

Von: Dieter

Dieter — Fri, 12 Nov 2010 09:48:35 +0000

@Robert
Gern geschehen.

Mit der htaccess-Datei kann man viel machen. Schade nur, dass ich bisher keine umfassende Einführung hierzu gefunden habe.

Von: Robert

Robert — Thu, 11 Nov 2010 13:26:01 +0000

Danke für den Hinweis mit der htaccess. Denn immer wieder fallen Bots auf, die sich nicht an die robots.txt halten. Bislang habe ich es immer mit der IP versucht, was aber einerseits nur begrenzt funktionierte und andererseits auch “echte” Besucher blockierte. Die htaccess-Lösung scheint soweit ganz gut zu funktionieren und ist perfekt ergänzbar.

Von: Dieter

Dieter — Mon, 15 Mar 2010 16:12:46 +0000

@Thomas Wie Du der Grafik in meinem Blogbeitrag "Spamschutz nur mit Antispam Bee" entnehmen kannst, habe ich den Haken bei Spam markieren, nicht löschen gesetzt. Ich teile Deine Einschätzung, dass die rabiate Methode des unmittelbaren automatischen Löschens nur in Ausnahmefällen gewählt werden sollte. Über 50 Spam-Kommentare an einem Tag sind bisher auf Webseiten-Infos.de die absolute Ausnahme. Unabhängig davon untersuche ich gerne kurz die Spam-Kommentare hinsichtlich irgendwelcher Auffälligkeiten (insbesondere IP-Adressen sowie User Agent mit chCounter).

Von: Thomas Scholz

Thomas Scholz — Mon, 15 Mar 2010 15:06:46 +0000

@Dieter: Das kann aber auch ein Nachteil sein, denn ein Versehen kann man dann nicht mehr korrigieren.

Ich würde die rabiate Methode des unkontrollierten Löschens nur benutzen, wenn täglich so viel Spam einschlägt, daß eine manuelle Kontrolle ohnehin nicht mehr zu bewältigen ist. Nur dann.

Einmal am Tag 50—100 Spamkommentare zu überfliegen, halte ich noch für vertretbar.

Von: Dieter

Dieter — Mon, 15 Mar 2010 14:49:14 +0000

@Thomas Dann werde ich demnächst mal bot-trap.de ausprobieren. SpamKarma habe ich noch nicht eingesetzt. Dazu kann ich deshalb nichts sagen. Antispam Bee blockiert in der Standardeinstellung automatische Spam-Kommentare. Diesbezüglich zitiere ich mal aus der Dokumentation von Antispam Bee:

Im Auslieferungszustand entfernt Antispam Bee jeden Spam-Kommentar, ohne dies irgendwo zu notieren. Diese Vorgehensweise hat den wesentlichen Vorteil, dass sich keine Liste mit Spam-Einträgen bildet, die in bestimmten Abständen zeitintensiv und mühselig kontrolliert und geleert werden muss.

Von: Thomas

Thomas — Mon, 15 Mar 2010 10:22:59 +0000

@Dieter: Nein, ich habe bisher nur gelesen und gehört, dass das mit der Bot-Falle super funktionieren soll. Wenn bei der Antispam Bee die Beiträge nichtmal mehr in der Datenbank landen, wäre das ja ein echter Vorteil gegenüber SpamKarma – wobei man das dort vielleicht auch einstellen kann und ich habs nur noch nicht gefunden.

Von: Dieter

Dieter — Sun, 14 Mar 2010 20:14:55 +0000

@Icem@n
Habe leider keine weiteren Infos zu dem Spider gefunden. Da er sich aber entgegen der Website nicht an die robots.txt hält, gehe ich stark davon aus, dass es sich um einen vorgetäuschten User Agent handelt und der Bot mit Sicherheit nicht mein Freund, sondern mein Feind ist.

Von: Icem@n

Icem@n — Sun, 14 Mar 2010 19:47:08 +0000

Auf der Suche nach Infos zu diesem Bot, bin ich auf diesen Eintrag gestoßen. Heute Nacht kam das Ding auch bei mir vorbei und bescherte mir rund 500 Besucher in knappen 4 Stunden. In den Logfiles habe ich bisher nichts Ungewöhnlichliches entdeckt, außer, dass sehr oft das Gästebuch und der Veranstaltungskalender besucht wurde. Ist mir jedenfalls höchst suspekt. Hast du noch weitere Infos zu diesem Spider finden können?

Von: Dieter

Dieter — Sun, 14 Mar 2010 17:08:43 +0000

@Thomas
Die fleißige Biene Antispam Bee kannst Du auch so einstellen, dass sie die automatischen Spam-Kommentare direkt blockt.

Dann bekommen Du und Deine WordPress-Datenbank diesen Spam noch nicht einmal mehr zu sehen.

Danke für den Hinweis auf bot-trap.de. Steht bei mir schon auf der Liste der Websites, die ich mir noch näher ansehen will. Hast Du denn schon Erfahrungen mit bot-trap.de gemacht?

Beste Grüße
Dieter

Von: Thomas

Thomas — Sun, 14 Mar 2010 16:55:52 +0000

Bin auch gerade auf der Suche nach einer besseren Lösung. Leider kommen die SpamBots bei mir immer mit unterschiedlicher IP und auch mit wechselndem UserAgent. Danke für den Tipp mit “Antispam Bee” – kannte ich bisher noch nicht – werd ich mir gleich mal ansehen. Zu der Misachtung der robots.txt solltest du mal auf bot-trap.de schauen.

Von: Dieter

Dieter — Sun, 14 Mar 2010 13:56:41 +0000

@Andreas Geht auch mit Spambots, wenn die einen unüblichen User Agent verwenden oder immer von der gleichen IP-Adresse kommen. Und im Übrigen kann ich Dir das WordPress-Plugin Antispam Bee gegen automatisierte Spam-Kommentare uneingeschränkt empfehlen. Ich hoffe, das hilft Dir im Bedarfsfall weiter. Beste Grüße Dieter

Von: Andreas

Andreas — Sun, 14 Mar 2010 13:36:19 +0000

Von solchen Bots habe ich bisher noch nichts gehört, aber der Artikel ist dennoch interessant. Ich werde mit den Link mal abspeichern, und wenn ich dann doch Besuch von einem solchen Bot bekomme, weiß ich ja, was ich zu tun habe. Bekäme man Spambots denn auf dieselbe Weise los? Vielleicht bekomme ich von so einem ja über kurz oder lang mal Besuch.

Von: Dieter

Dieter — Thu, 11 Mar 2010 05:08:19 +0000

Ich sollte so spät nachts keine Blogbeiträge schreiben.

Du hast mal wieder den Nagel auf den Kopf getroffen.

Die einzige von mir beobachtete Aktivität des Bots war die Missachtung der robots.txt.

Er war mir mit seinen weiterhin extrem häufigen Zugriffen auf meine Webseiten, die mir die Besucherstatistik verfälschen und Serverressourcen verbrauchen, lediglich suspekt. Werde den Titel des Blogbeitrags gleich mal korrigieren.

Danke für den Gedankenschubser!

Von: Thomas Scholz

Thomas Scholz — Thu, 11 Mar 2010 01:58:46 +0000

Was für Spam hat der denn hinterlassen?