KI-Tests nutzen Reibung der Agenten als Telemetrie
Das schwedische Unternehmen Airpelago aus Göteborg hat Mitte 2025 seinen Qualitätssicherungsprozess grundlegend umgestellt. Seit Juni 2025 setzt das Entwicklungsteam auf agentic Quality Assurance von QA.tech, um bisher nicht automatisierbare, kartenbasierte Schnittstellen zuverlässig zu testen. CTO und Mitgründer Tobias Fridén betonte, dass traditionelle Skript-basierte Tools wie Playwright bei komplexen Interaktionen durch instabile Selektoren und Zeitverschiebungen scheiterten, was zu einer Flut nutzloser Build-Brüche führte. Der Kernansatz lautet Friction as Telemetry. Anstatt Testfehler als Infrastrukturproblem zu betrachten, wertet Airpelago die Widerstände aus, mit denen der KI-Agent bei der Zielerreichung konfrontiert wird. Zielorientierte Agenten passen sich automatisch an UI-Änderungen an, sodass verbliebene Fehler primär auf Produktmängel und nicht auf Testinfrastruktur zurückzuführen sind. Die Misserfolge verwandeln sich dadurch von einem wiederholbaren Lärm in ein diagnostisches Signal. Statt starrem DOM-Selektoren zu nutzen, formuliert das Team zwanzig zentrale Nutzerjourneys in natürlicher Sprache. Die KI-Agenten simulieren das Verhalten realer Betreiber, planen Drohnen-Routen und exportieren Berichte. Das System läuft parallel zu Unit- und Integrationstests und wird über einen Git-Keyword-Trigger im Continuous-Integration-Prozess angestoßen. Dies ermöglicht tägliche Mehrfachtests ohne Entwicklungsblockaden. Fridén vermerkt, dass das Unternehmen seitdem ohne zögerliche Manöver Releases ausliefert. Die Auswertung der Agentenfehler erfolgt nach einem strukturierten Schema. Navigation, Beschriftung, Zustandsmanagement und Datenkonsistenz bilden vier Reibungsfelder, die jeweils unterschiedliche Korrekturmaßnahmen erfordern. Beispielsweise offenbart Reibung bei der Datenkonsistenz visuelle Rendering-Probleme, die herkömmliche DOM-Tests nicht erfassen. Die fehlergenerierten Reports enthalten Screenshots, Logdaten und Netzwerkaktivitäten zu jedem Schritt und ersetzen manuelle Reproduktionsschritte. Ein geschlossener Feedback-Loop verstärkt die Wirkung. Die strukturierten Fehlerberichte dienen als präzisere Prompts für Code-Agents wie Claude Code oder Codex. Über eine MCP-Server-Integration können Entwickler Tests direkt aus der Entwicklungsumgebung auslösen und Patches in Echtzeit validieren. Dies verschiebt die Fehlerbehebung von der Produktion in die Code-Review-Phase. Der Paradigmenwechsel von der reinen Skript-Validierung hin zur nutzerzentrierten Zielerreichung zeigt, dass KI-gestützte Qualitätssicherung nicht nur Automatisierungslücken schließt, sondern Testdaten in kontinuierliches Produktdesign transformiert. Unternehmen mit komplexen grafischen Oberflächen profitieren besonders von dieser Anpassungsfähigkeit. Die frühzeitige Erkennung von Nutzerbarrieren reduziert Kundenverluste und stabilisiert die Entwicklungszyklen signifikant.
