Skip to content
The loss curve

Loi de scaling

Observation empirique : la qualité progresse de façon prévisible avec les paramètres, les tokens d’entraînement et le compute.