Aller au contenu
The loss curve

LoRA

Low-Rank Adaptation. Fine-tune un modèle sans réentraîner ses poids : on fige W et on apprend une petite mise à jour A·B.

Explication complémentaire dans Step by Token, chapitre 14.

Où ce terme est construit