Datenerreichbar
Task-Completion Time Horizons of Frontier AI Models
Die Messreihe zu derselben Kennzahl, seit Januar 2026 in der Fassung 1.1 mit 228 Aufgaben aus Softwareentwicklung, maschinellem Lernen und IT-Sicherheit. METR schreibt sie nicht mehr fort: Der letzte Messwert kam am 08.05.2026 dazu, seit dem 08.09.2026 steht der Hinweis darauf im Kopf der Seite. Die Werte selbst zeichnet ein Skript, im Text stehen die Erläuterungen: was eine solche Angabe bedeutet und warum Zuverlässigkeitsstufen oberhalb von 80 Prozent mit dieser Aufgabensammlung nicht messbar wären.
geprüft 10.11.2026
Worauf sich diese Seite beruft, wörtlich, abgerufen am 29.08.2026:
the 50%-time horizon is the duration at which an agent is predicted to succeed half the time
bestätigt 10.11.2026Since the trends for 50%- and 80%-time horizons are very similar, we expect the (true) time horizon at higher reliability levels to show a similar trend
bestätigt 10.11.2026This page is no longer actively updated.
bestätigt 10.11.2026The answer is somewhere in between.
bestätigt 10.11.2026These primarily consist of software engineering, machine learning, and cybersecurity tasks.
bestätigt 10.11.2026most real-world work draws on prior context, such as previous conversations, tacit knowledge, or familiarity with an existing code base
bestätigt 10.11.2026
01 Welche Arbeit sich übergeben lässt03 Chancen und Grenzen05 Geschwindigkeit der Entwicklung