TestMu AI hat sein Kommandozeilenwerkzeug Kane CLI um sogenannte Evidence Packs erweitert. Jeder Testdurchlauf wird damit automatisch in einer einzigen, portablen Datei zusammengefasst. Mudit Singh von TestMu AI erklärt dazu, dass Entwickler so die einzelnen Schritte eines KI-Agenten lückenlos verfolgen und bei einem gescheiterten Lauf innerhalb weniger Minuten die Ursache finden könnten.
Die Entscheidung
Kane CLI wurde im April 2026 veröffentlicht und seither mehrfach erweitert, unter anderem um KI-gestützte Generierung von Testfällen und den sogenannten Assurance Lifecycle. Statt diese Automatisierung weiter auszubauen, entschied sich TestMu AI nun dafür, zunächst die Nachvollziehbarkeit der Ergebnisse zu verbessern. Evidence Packs sind seit dem 8. Oktober 2026 verfügbar.
Die Ausgangslage
TestMu AI, früher als LambdaTest bekannt, bietet End-to-End-KI-Agenten für das Planen, Erstellen, Ausführen und Analysieren von Tests an. Kane CLI selbst gilt als Open-Source-Werkzeug unter der Apache-2.0-Lizenz und läuft auf macOS, Linux und Windows. Tool Junction bewertet das Werkzeug mit 4,3 von 5 Punkten und führt es auf Platz 14 von 21 in der Kategorie AI Code Agents.
Was dagegen sprach
Mit einer soliden Bewertung und breiter Plattformunterstützung hätte es naheliegend gewirkt, zunächst an Platzierung und Funktionsumfang zu arbeiten. Stattdessen investierte TestMu AI in ein neues, offenes Dateiformat – eine Entscheidung, die kurzfristig keine neue Testfunktion liefert, sondern vor allem die Dokumentation bestehender Läufe verändert.
Wie es umgesetzt wurde
Jedes Evidence Pack basiert auf dem offenen .evidence-Format und liegt als in sich geschlossenes ZIP-Archiv vor. Darin gebündelt sind die Definition des jeweiligen Tests, eine Abfolge einzelner Arbeitsschritte, Protokolle aus Konsole und Netzwerk sowie Aufzeichnungen aufgetretener Fehler, alles gesammelt in einer Datei.
Die Pakete werden automatisch mit jedem Durchlauf übertragen und in den Test Manager hochgeladen. Läuft ein Test extern im Grid, wird das entstehende Paket dort gesichert und steht nach Abschluss des Auftrags zum Download bereit.
Was andere daraus lernen können
Evidence Packs werden für jeden Testdurchlauf automatisch erzeugt, ohne dass Entwickler zusätzliche Schritte einrichten müssen. Diese Automatisierung der Dokumentation selbst ist nach Darstellung von TestMu AI der eigentliche Kern der Neuerung.
Bild: Symbolbild, KI-erzeugt.