Solved

Bad Bot sperren

6 years ago

In der Browsestatistik meiner Homepage (mit Homepage-Creator erstellt) nimmt Ahrefsbot 35 Prozent des Aufkommens ein. Wie kann ich Bad Bots sperren?

Bildschirmfoto 2018-11-24 um 11.53.44.png

548

7

    • 6 years ago

      Hallo @vergeben,

      IP ermitteln und diese sperren.

       

      Aber gerade diese Bots helfen die Webseite bekannter zu machen.

      3

      Answer

      from

      6 years ago

      Danke, DerEineIstDa, für das Befassen. Allerdings: meines Wissens zählt Ahrefsbot zu den Bad Bots, die auf der Suche nach Mailadressen und 404-Fehlern (?) unterwegs seien: "Nach den Bad Bots kommen die Angriffe", war zu lesen. Deshalb meine Sorge - und die Hoffnung, die Telekom als Homepage-Provider könnte sich ebenfalls betroffen sehen. - Oder liege ich falsch, und der Bot ist tatsächlich (für mich) nützlich? 

      Answer

      from

      6 years ago

      @vergeben, das habe ich gefunden:

      Ein Bot aus der Ukraine, der Inhalte durchsucht und nach Backlinks stöbert, so die eigene Aussage. In Wirklichkeit ist dieser Bot ziemlich aggressiv, hält sich nicht an die robot.txt und sollte per Htaccess-Datei anhand der IP oder der Kennung ausgesperrt werden. Benutzte IPs: 212.113.35.162 212.113.37.105 212.113.37.106 213.186.119.134 213.186.120.196 213.186.122.2 213.186.122.3 213.186.127.3 173.199.115.115 5.10.83.70 Benutzter User Agent: AhrefsBot/1.0; AhrefsBot/2.0; AhrefsBot/3.0; AhrefsBot/4.0; AhrefsBot/5.0; SiteBot/0.1 Quelle: http://www.forum-hilfe.de/

      Ein Bot aus der Ukraine, der Inhalte durchsucht und nach Backlinks stöbert, so die eigene Aussage. In Wirklichkeit ist dieser Bot ziemlich aggressiv, hält sich nicht an die robot.txt und sollte per Htaccess-Datei anhand der IP oder der Kennung ausgesperrt werden.

      Benutzte IPs:
      212.113.35.162
      212.113.37.105
      212.113.37.106
      213.186.119.134
      213.186.120.196
      213.186.122.2
      213.186.122.3
      213.186.127.3
      173.199.115.115
      5.10.83.70

      Benutzter User Agent:
      AhrefsBot/1.0;
      AhrefsBot/2.0;
      AhrefsBot/3.0;
      AhrefsBot/4.0;
      AhrefsBot/5.0;
      SiteBot/0.1

      Quelle: http://www.forum-hilfe.de/
      Ein Bot aus der Ukraine, der Inhalte durchsucht und nach Backlinks stöbert, so die eigene Aussage. In Wirklichkeit ist dieser Bot ziemlich aggressiv, hält sich nicht an die robot.txt und sollte per Htaccess-Datei anhand der IP oder der Kennung ausgesperrt werden.

      Benutzte IPs:
      212.113.35.162
      212.113.37.105
      212.113.37.106
      213.186.119.134
      213.186.120.196
      213.186.122.2
      213.186.122.3
      213.186.127.3
      173.199.115.115
      5.10.83.70

      Benutzter User Agent:
      AhrefsBot/1.0;
      AhrefsBot/2.0;
      AhrefsBot/3.0;
      AhrefsBot/4.0;
      AhrefsBot/5.0;
      SiteBot/0.1

      Quelle: http://www.forum-hilfe.de/

       

      Answer

      from

      6 years ago

      Hallo @vergeben,

      den Ahrefsbot gibt es schon lange und genauso lange gibt es vermutungen über seine Aufgaben. Ich selbst hatte noch keinen Ärger mit ihm und bei einem Bekannten, der sich direkt an Ahrefs wandte weil er Serverüberlastungen durch den Bot hatte, wurde das von Ahrefs abgestellt. Ob er nützlich, unnützlich oder sogar gefährlich ist, kann keiner genau sagen aber sperren kann man ihn nur bedingt, deshalb ist die beste Reaktion ihn einfach zu ignorieren. Sollte er wirklich die Serverauslastung beeinflussen, wird die Telekom geeignete Maßnahmen ergreifen. Was @Gelöschter Nutzer dir kopiert hat, ist übrigens von 2013 und Ahrefs selbst, erreichst Du hier: https://ahrefs.com/de/robot

      MfG. Bernd

      Unlogged in user

      Answer

      from

    • Accepted Solution

      accepted by

      6 years ago

      Hallo @vergeben,

      den Ahrefsbot gibt es schon lange und genauso lange gibt es vermutungen über seine Aufgaben. Ich selbst hatte noch keinen Ärger mit ihm und bei einem Bekannten, der sich direkt an Ahrefs wandte weil er Serverüberlastungen durch den Bot hatte, wurde das von Ahrefs abgestellt. Ob er nützlich, unnützlich oder sogar gefährlich ist, kann keiner genau sagen aber sperren kann man ihn nur bedingt, deshalb ist die beste Reaktion ihn einfach zu ignorieren. Sollte er wirklich die Serverauslastung beeinflussen, wird die Telekom geeignete Maßnahmen ergreifen. Was @Gelöschter Nutzer dir kopiert hat, ist übrigens von 2013 und Ahrefs selbst, erreichst Du hier: https://ahrefs.com/de/robot

      MfG. Bernd

      0

    • 6 years ago

      Hallo @vergeben,

      da Du Deine Daten bereits hinterlegt hast, konnte ich sehen, dass Du bereits eine robots.txt auf Deinem Webspace liegen hast. Diese könntest Du entsprechend erweitern, schaue Dir dazu einmal diesen https://homepagecenter.telekom.de/index.php?id=401&no_cache=1&sword_list%5B%5D=Bots Artikel in unserer Homepage Hilfe an,

      Gruß,
      Ingo F.

      1

      Answer

      from

      6 years ago

      Ja @Ingo F.,

      den Vorschlag hätte ich auch gemacht, hat in diesen Fall aber wenig Wirkung weil der besagte Bot sich leider nicht daran hält. Aber wie gesagt, er ist bekannt und tritt nur immer in Schüben auf, ignorieren ist das einfachste denn direkten Schaden macht er eigentlich nicht.

      MfG. Bernd

      Unlogged in user

      Answer

      from

      Unlogged in user

      Ask

      from

      This could help you too

      Solved

      in  

      309

      0

      2

      Solved

      6 years ago

      in  

      424

      2

      6

      in  

      315

      0

      1

      Solved

      in  

      1144

      0

      3