SchlüsselarbeitOriginalarbeiterreichbar
TDAD: Test-Driven Agentic Development. Reducing Code Regressions in AI Coding Agents via Graph-Based Impact Analysis
Die Messung zu der Frage, was eine Verfahrensanweisung im Prompt allein bewirkt. Gegenstand der Arbeit ist ein Werkzeug, das dem Agenten vor der Änderung sagt, welche Tests sie berührt; der aufschlussreiche Teil ist die Kontrollbedingung daneben. Wer den Agenten nur anweist, testgetrieben zu arbeiten, ohne ihm den passenden Testkontext zu geben, bekommt mehr Regressionen als ohne jeden Eingriff. Die Erhebung ist klein und gehört zur Zahl: zwei offene Modelle auf gewöhnlicher Hardware, 100 und 25 Aufgaben aus SWE-bench Verified.
geprüft 24.09.2026
Worauf sich diese Seite beruft, wörtlich, abgerufen am 28.08.2026:
Evaluated on SWE-bench Verified with two open-weight models running on consumer hardware
bestätigt 24.09.2026TDAD reduced regressions by 70% (6.08% to 1.82%) compared to a vanilla baseline
bestätigt 24.09.2026adding TDD procedural instructions without targeted test context increased regressions to 9.94%
bestätigt 24.09.2026worse than no intervention at all
bestätigt 24.09.2026surfacing contextual information outperforms prescribing procedural workflows
bestätigt 24.09.2026