Autoregressives Modell
Modell, das den nächsten Wert aus den vorherigen vorhersagt.
Ein autoregressives Modell erzeugt eine Ausgabe Schritt für Schritt, indem es jeweils das nächste Element auf Basis der bereits erzeugten vorhersagt. Große Sprachmodelle arbeiten so: Sie sagen fortlaufend das nächste Token voraus und hängen es an. Dieses Prinzip erklärt, warum solche Modelle Text von links nach rechts generieren.