Datenerreichbar
Yuichi Tateno, S1MB: comparing System One Decision Models across 100+ benchmarks
huggingface.co (externe Seite)
Beschreibung und erste Ergebnisse des System One Mosaic Benchmark vom 30.09.2026: 23 Entscheidungsmodelle auf 137 Aufgaben aus öffentlichen Datensätzen und eigenen synthetischen Sätzen, Stand 30.09.2026. Jev 1.13 führt, Tev1-4B-experimental steht auf Platz fünf, Nimble fehlt in dieser Aufnahme. Der Autor trainiert ein eigenes Modell im Vergleich und nennt die Überschneidung seiner Trainings- mit den Prüfdaten selbst. Die Werte sind gegen einfache Vergleichswerte bereinigt und weichen deshalb von Trefferquoten ab.
geprüft 10.11.2026
Worauf sich diese Seite beruft, wörtlich, abgerufen am 10.10.2026:
Neither is raw accuracy
bestätigt 10.11.2026
derzeit nirgends verwendet