Embedding-Dimension
Länge der internen Vektoren eines Modells.
Die Embedding-Dimension gibt an, aus wie vielen Zahlen die internen Vektoren bestehen, mit denen ein Modell Token darstellt. Eine höhere Dimension erlaubt feinere Unterscheidungen, erhöht aber Speicherbedarf und Rechenaufwand. Sie ist eine grundlegende Kenngröße der Modellarchitektur.