NachschlagenQuellenregister

Originalarbeiterreichbar

Into the Unknown: Benchmarking AI agents on open scientific research problems

arxiv.org (externe Seite)

arXiv-Preprint vom 13.10.2026, der den Benchmark beschreibt und nennt, dass keine der 135 Abgaben alle Bedingungen erfüllt.

geprüft 10.11.2026

Worauf sich diese Seite beruft, wörtlich, abgerufen am 08.11.2026:

  • We have nine frontier agents write 15 follow-ups each, spanning quantum computing, plasma physics, computational chemistry, materials science, and scientific machine learning domains.bestätigt 10.11.2026
  • None of the 135 submissions satisfies all the conditions, and 114 fail our integrity checkbestätigt 10.11.2026
  • most often because the paper claims work that was never done or reports numbers that contradict the recorded evidencebestätigt 10.11.2026
  • Overall, agents readily produce papers that look like follow-ups, but none meets the standard of the domain scientist, leaving substantial headroom.bestätigt 10.11.2026

Annahme zu autonomer KI-Forschung wackelt: Keine der 135 Folgestudien von neun Agenten besteht vor Fachleuten der US-Nationallabore

Alle Quellen

↑↓ auswählenEnter öffnenDie Suche läuft im Browser. Nichts wird übertragen.