KI-Bots beeinflussen Webseiten seit Anfang des Jahres. Besonders betroffen ist die Linux Weekly News (LWN-net). Jonathan Corbet der Gründer hat festgestellt, dass die Seite häufig nur langsam reagiert.
DDoS-Angriffe durch KI-Scraper
Die Bots verursachen einen formidablen DDoS-Angriff. Sie überfluten die Seite zeitweise mit hunderten IP-Adressen. Sobald sie Inhalte abgreifen wollen verstopfen sie die Leitungen. Corbet hat auf Mastodon erklärt, dass nur ein minimaler Teil des Traffics echten menschlichen Nutzern zugutekommt.
Probleme mit den KI-Scraper-Bots
Diese Bots geben sich als normale Nutzer aus. Die einzige Ausnahme bildet die „robots.txt“ die sie nicht lesen. Corbet beschreibt die gegenwärtige Lage als "mehr als unhaltbar".
Die Betreiber der Seite müssen Zeit in einen aktiven Verteidigungsmechanismus investieren. Nur so bleibt die Seite online. Corbet äußert: „Ich würde lieber über Buchhaltungssysteme berichten wie mich mit dieser Scheiße herumschlagen.“
Negative Auswirkungen auf das Web
Das Problem ist nicht auf LWN beschränkt. Corbet äußert: „Dieses Verhalten zerstört das Netz mehr, als es ohnehin schon zerfällt.“ In einer Diskussion führt er weiter aus: Es ein Muster gibt. Die IPs bleiben unter dem Schwellwert für Sicherheitsmaßnahmen. Der Überlastungseffekt ist jedoch überwältigend.
Jede aktive Verteidigung stehe vor der Herausforderung, ganze Subnetze statt einzelner Adressen zu blockieren. Selbst diese Maßnahmen könnten möglicherweise nicht ausreichend sein.
Stimmen aus der Community
Auf Mastodon unterstützen ihn weitere Betroffene. Ein Nutzer schreibt: „Wir haben einen massiven Anstieg des KI-Unsinns beobachtet. Sie respektieren nicht einmal die ‚robots.txt‘, ebenso wie es bessere Suchmaschinen tun.“ Ein anderer Nutzer von Fedora ergänzt: „Ich musste heute Morgen eine Menge blockieren um pagure.io benutzbar zu halten.“
Ein humorvoller Ausblick
Trotz der Widrigkeiten verliert Corbet seinen Humor nicht. Er denkt an alternative Lösungen. „Nepenthes kam mir in den Sinn jedoch das hat ebenfalls eigene Risiken“, schreibt er. Intern gibt es Vorschläge die Bots zu identifizieren. Diese sollen nur mit Inhalten gefüttert werden die vorschlagen, ein Abo von LWN zu erwerben. Verlockende Idee; findet Corbet.
Kommentare