LONDON (IT BOLTWISE) – In der digitalen Welt, in der KI-Modelle zunehmend auf Daten aus dem Internet angewiesen sind, stellt sich die Frage, wie man sich gegen die unaufhörlichen Anfragen von KI-Bot-Scrapern schützen kann. Eine bemerkenswerte Lösung bietet Xe Iaso mit ihrem Open-Source-Projekt Anubis, das seit seiner Einführung im Januar bereits fast 200.000 Mal heruntergeladen wurde.
In der heutigen digitalen Landschaft, in der KI-Modelle immer mehr auf Daten aus dem Internet angewiesen sind, stellt sich die Frage, wie man sich gegen die unaufhörlichen Anfragen von KI-Bot-Scrapern schützen kann. Eine bemerkenswerte Lösung bietet Xe Iaso mit ihrem Open-Source-Projekt Anubis, das seit seiner Einführung im Januar bereits fast 200.000 Mal heruntergeladen wurde. Anubis wurde entwickelt, um den kleinen Teil des Internets vor der Flut von Anfragen durch KI-Unternehmen zu schützen.
Die Motivation für die Entwicklung von Anubis kam, als Iaso bemerkte, dass ihr eigener Git-Server unter der Last von KI-Scrapern litt. Diese Bots durchforsten das Internet und sammeln alles, was als Trainingsdaten für KI-Modelle verwendet werden kann. Wie viele andere kleine Organisationen bemerkte Iaso das Problem erst, als ihr Server nicht mehr funktionierte. Ein Blick in die Protokolle zeigte, dass ein Amazon-Bot jede einzelne Seite anklickte.
Traditionelle Methoden wie die robots.txt-Datei, die automatisierten Tools das Scrapen untersagt, werden von vielen KI-Unternehmen ignoriert. CAPTCHAs sind ebenfalls keine ideale Lösung, da einige KI-Bots bereits über eingebaute CAPTCHA-Löser verfügen. Anubis hingegen nutzt die Fähigkeiten des Browsers, um sicherzustellen, dass ein Besucher ein Mensch ist und kein Bot. Dies geschieht durch kryptografische Berechnungen mit JavaScript, die für den Benutzer unsichtbar sind.
Ein wesentlicher Vorteil von Anubis ist, dass es kostenlos, quelloffen und leichtgewichtig ist. Es kann fast überall implementiert werden und bietet eine praktikable Lösung für ein weit verbreitetes Problem im Internet. Iaso arbeitet kontinuierlich an der Verbesserung von Anubis, um es noch effizienter zu machen. Sie plant, eine nicht-kryptografische Herausforderung zu entwickeln, um die CPU-Belastung der Benutzer zu reduzieren, und denkt über eine Version nach, die ohne JavaScript auskommt.
Die größte Herausforderung bei der Entwicklung von Anubis besteht darin, das richtige Gleichgewicht zu finden: Wie blockiert man Bots, ohne echte Benutzer zu beeinträchtigen? Iaso betont, dass es ein ständiges Katz-und-Maus-Spiel zwischen den Entwicklern von KI-Bot-Scrapern und denjenigen ist, die versuchen, sie zu stoppen. Trotz der Herausforderungen ist Anubis ein vielversprechendes Werkzeug, das bereits von namhaften Organisationen wie GNOME und UNESCO genutzt wird.
Obwohl Iaso Unterstützung durch Patreon und Sponsoren auf GitHub erhält, reicht die finanzielle Unterstützung nicht aus, um Anubis in Vollzeit zu entwickeln. Sie hofft, dass sich dies in Zukunft ändern wird, um das Projekt weiter voranzutreiben. Anubis zeigt, dass auch kleine Projekte einen großen Einfluss auf die Sicherheit und den Schutz des Internets haben können.
💳 Amazon-Kreditkarte mit 2.000 Euro Limit bestellen!
🔥 Heutige Hot Deals bei Amazon: Bis zu 80% Rabatte!
🎉 Amazon Haul-Store für absolute Schnäppchenjäger!
- ★ 23-stufiges KI-Go-Training – Für Spieler mit Grundkenntnissen der Regeln – Entwickelt als intelligenter Trainingspartner passt sich die KI Spielern von 18K bis 9D an. Ideal für alle, die die Grundregeln bereits beherrschen und ihr Spiel verbessern möchten.
- IHR EMOTIONALER AI-BEGLEITER: Eiliko ist mehr als nur ein Anhänger, es ist ein charismatischer KI-Freund. Mit einem dynamischen LED-Bildschirm, der eine Vielzahl von animierten Gesichtern und Ausdrucksformen anzeigt, reagiert er auf Ihre Interaktionen mit einzigartiger Persönlichkeit und Charme.
- 【MEHR LEBEN FÜR DEINEN SCHREIBTISCH】 Lerne Eilik kennen – deinen kleinen Roboter-Freund mit Persönlichkeit. Mit liebevollen Animationen, ausdrucksstarken Reaktionen und spielerischen Interaktionen bringt Eilik mehr Freude in deinen Alltag. Ob auf dem Schreibtisch, im Büro oder am Nachttisch – Eilik wird schnell zu einem vertrauten Begleiter für besondere Momente.
- 【XL-Größe für gedeihende Pflanzen】Geben Sie Ihren Pflanzen den Raum, den sie verdienen! Unser verbessertes, großes 13,7 cm großes Design bietet Platz für Pflanzen mit einem Durchmesser von bis zu 8,9 cm und damit deutlich mehr Platz für Wurzelwachstum und Pflanzengesundheit im Vergleich zu kleineren, veralteten Modellen. Die Produktabmessungen betragen 13,6 x 13,6 x 13,2 cm und das Gerät wiegt nur 355 g.
- V28 Update - JETZT MIT NEUEN FUNKTIONEN! Als Reaktion auf das Ladeproblem von Loona haben wir das automatische Aufladen 2.0 verbessert. Diese Optimierung hilft Loona, die Ladewege in verschiedenen Szenarien zu erkennen und anzupassen, um die Erfolgsquote beim automatischen Aufladen zu erhöhen. Mobile Hotspots können sich mit Loona verbinden und überwinden WLAN-Einschränkungen, sodass Sie jederzeit und überall mit Loona interagieren können.
- Die besten Bücher rund um KI & Robotik!
- Die besten KI-News kostenlos per eMail erhalten!
- Zur Startseite von IT BOLTWISE® für aktuelle KI-News!
- IT BOLTWISE® kostenlos auf Patreon unterstützen!
- Aktuelle KI-Jobs auf StepStone finden und bewerben!
- Künstliche Intelligenz: Dem Menschen überlegen – wie KI uns rettet und bedroht | Der Neurowissenschaftler, Psychiater und SPIEGEL-Bestsellerautor von »Digitale Demenz«
Du hast einen wertvollen Beitrag oder Kommentar zum Artikel "Anubis: Ein Open-Source-Werkzeug gegen KI-Bot-Scraper" für unsere Leser?
#Sophos
#AmazonPrime
#Bestseller
Es werden alle Kommentare moderiert!
Für eine offene Diskussion behalten wir uns vor, jeden Kommentar zu löschen, der nicht direkt auf das Thema abzielt oder nur den Zweck hat, Leser oder Autoren herabzuwürdigen.
Wir möchten, dass respektvoll miteinander kommuniziert wird, so als ob die Diskussion mit real anwesenden Personen geführt wird. Dies machen wir für den Großteil unserer Leser, der sachlich und konstruktiv über ein Thema sprechen möchte.
Du willst nichts verpassen?
Du möchtest über ähnliche News und Beiträge wie "Anubis: Ein Open-Source-Werkzeug gegen KI-Bot-Scraper" informiert werden? Neben der E-Mail-Benachrichtigung habt ihr auch die Möglichkeit, den Feed dieses Beitrags zu abonnieren. Wer natürlich alles lesen möchte, der sollte den RSS-Hauptfeed oder IT BOLTWISE® bei Google News wie auch bei Bing News abonnieren.
Nutze die Google-Suchmaschine für eine weitere Themenrecherche: »Anubis: Ein Open-Source-Werkzeug gegen KI-Bot-Scraper« bei Google Deutschland suchen, bei Bing oder Google News!