Originalarbeiterreichbar
Spec Kit Agents: Context-Grounded Agentic Workflows
Eine Messung an einer spec-getriebenen Bauform, erschienen am 07.04.2026. 128 Durchgänge über 32 Aufgaben in fünf Projekten. Gegenstand der Messung sind Hooks, die jede Phase an Belegen aus dem Projekt erden und ihr Ergebnis prüfen. Die Verbesserung liegt bei 0,15 Punkten auf einer Skala von 1 bis 5, also knapp 4 Prozent der Spanne. Die Zwischenschritte der Vorgabe allein heben die Note um 0,05 Punkte.
geprüft 10.11.2026
Worauf sich diese Seite beruft, wörtlich, abgerufen am 03.09.2026:
leading to hallucinated APIs and architectural violations
bestätigt 10.11.2026Read-only probing hooks ground each stage (Specify, Plan, Tasks, Implement) in repository evidence
bestätigt 10.11.2026We evaluate 128 runs covering 32 features across five repositories.
bestätigt 10.11.2026Context-grounding hooks improve judged quality by +0.15 on a 1-5 composite LLM-as-judge score
bestätigt 10.11.2026while maintaining 99.7-100 percent repository-level test compatibility
bestätigt 10.11.2026augmentation hooks improve baseline by 1.7 percent, achieving 58.2 percent Pass@1
bestätigt 10.11.2026