WISSNOX_
Nachrichten

UK AISI und EvalEval wollen KI-Benchmark-Ergebnisse reproduzierbar machen

wissnox@ai:~$ cat news_1

› Wer KI-Modelle bewertet, steht vor einem strukturellen Problem: Ergebnisse erscheinen in unterschiedlichen Formaten, auf verschiedenen Plattformen und oft ohne ausreichende Angaben, um die Messungen zu wiederholen.

wissnox@ai:~$ cat news_2

› Das britische AI Security Institute (AISI) und die EvalEval-Koalition wollen dieses Problem gemeinsam angehen - und haben jetzt eine erste konkrete Zusammenarbeit veröffentlicht.

wissnox@ai:~$ cat news_3

› Was AISI und EvalEval gemeinsam aufgebaut haben Die Zusammenarbeit begann laut dem Blogbeitrag mit einem gemeinsamen Workshop neben der NeurIPS 2025.

wissnox@ai:~$ cat news_4

› Rückmeldungen des Instituts haben dabei das Schema "Every Eval Ever" (EEE) mitgeformt - ein einheitliches Berichtsformat für Evaluierungsergebnisse.

wissnox@ai:~$ open --full
Vollständig lesen

UK AISI und EvalEval wollen KI-Benchmark-Ergebnisse reproduzierbar machen

Artikel auf wissnox.de öffnen