Aller au contenu
The loss curve

Décodage glouton

Toujours prendre le token le plus probable. Déterministe et localement optimal — ce qui est exactement pourquoi il boucle et produit un texte plat.

Explication complémentaire dans Step by Token, chapitre 7.

Où ce terme est construit