GSM8K
Benchmark für mathematisches Textverständnis.
GSM8K ist ein Datensatz aus mathematischen Textaufgaben auf Grundschulniveau, der prüft, ob ein Modell mehrstufige Rechenwege korrekt durchführen kann. Er gilt als wichtiger Test für die Schlussfolgerungsfähigkeit von Sprachmodellen und profitiert stark von Chain-of-Thought.