Zurück zum Wiki

Temperatur

Der Regler, der bestimmt, wie viel das Modell wagt.

Der Vergleich

Es ist wie eine Bestellung beim Koch. Bei niedriger Temperatur folgt er dem Rezept aufs Wort: Das Gericht schmeckt jedes Mal gleich. Bei hoher Temperatur improvisiert er: Mal entsteht etwas Geniales, mal ein interessantes Desaster.

Im Detail

Die Temperatur ist ein Parameter (typischerweise zwischen 0 und 2), der die Wahrscheinlichkeitsverteilung bei der Wahl jedes Tokens verändert. Nahe 0 wählt das Modell fast immer die wahrscheinlichste Option: konsistente, vorhersehbare Antworten. Bei hohen Werten verteilt sich die Wahrscheinlichkeit: mehr Vielfalt, mehr Kreativität – und mehr Fehlerrisiko.

Ein Beispiel

Daten aus einer Rechnung extrahieren? Temperatur 0. Zwanzig Namensideen für dein Café sammeln? Dreh sie hoch. Gleiches Modell, andere Einstellung.

Verwandte Konzepte