HyperAIHyperAI

Command Palette

Search for a command to run...

vor einem Tag
Generative KI
LLM

Anubis blockiert KI-Scraper durch Proof-of-Work

Websitebetreiber setzen zunehmend auf eine neuartige Bot-Schutzlösung namens Anubis, um vor allem KI-Unternehmen daran zu hindern, ihre Inhalte in großem Stil zu scannen. Diese massiven Abrufversuche führen häufig zur Überlastung der Server, was den Zugriff für reguläre Nutzer unmöglich macht. Anubis stellt dabei einen pragmatischen Kompromiss dar und implementiert einen Proof-of-Work-Mechanismus, der konzeptionell an Hashcash angelehnt ist. Das Prinzip sieht vor, dass einzelne Besucher durch eine minimale Rechenchallenge kaum beeinträchtigt werden, während automatisierte Crawler aufgrund der kumulativen Rechenlast schnell an ihre Grenzen stoßen. Dadurch soll das ressourcenfressende Sammeln von Daten wirtschaftlich und technisch erschwert werden. Experten stufen das System aktuell als Übergangslösung ein. Die PoW-Challenges sollen Webmastern lediglich die nötige Zeit verschaffen, um leistungsfähigere Erkennungsmethoden wie Deep-Fingerprinting und die Identifizierung von Headless-Browsern zu integrieren. Letztere lassen sich oft bereits an spezifischen Renderings von Schriftarten erkennen, sodass künftig auf interaktive Challenges verzichtet werden kann. Technisch ist Anubis auf die Ausführung moderner JavaScript-Standardfunktionen angewiesen. Dies steht in Konflikt mit bestimmten Browsererweiterungen, die den Code zur Sicherheit oder zum Datenschutz blockieren, etwa JShelter. Nutzer dieser Add-ons müssen die entsprechenden Filter für die betroffene Domäne deaktivieren, um die Seite korrekt laden zu können. Die Entwicklung spiegelt den anhaltenden Wettlauf zwischen datensammelnden KI-Modellen und dem Wunsch nach einer stabilen Infrastruktur wider, wobei der Fokus aktuell auf einer kosteneffizienten, aber temporären Eindämmung liegt.

Verwandte Links