KI SpotlightNewsBenchmark-Kontamination
Testdaten sind versehentlich ins Training geraten.
Von Benchmark-Kontamination spricht man, wenn Aufgaben eines Tests bereits in den Trainingsdaten eines Modells enthalten waren. Das Modell erscheint dann besser, als es ist, weil es die Antworten teils auswendig gelernt hat. Sie ist ein ernstes Problem bei der fairen Bewertung von KI.