← Le glossaire

apprentissage

Pour commencer

On dit qu’un modèle « apprend », mais il ne lit pas un cours et ne retient pas des phrases. Il ajuste des réglages, un peu comme on accorde un instrument en écoutant la note.

Les faits

Le modèle traite des exemples et produit des sorties. Une fonction de perte mesure l’écart avec l’objectif, la rétropropagation calcule l’effet de chaque paramètre sur cet écart, puis un optimiseur ajuste les paramètres. Ce cycle se répète sur de nombreux lots d’exemples. Le préentraînement et le fine-tuning sont deux formes d’apprentissage.

À retenir

Apprendre, pour un modèle, c’est modifier ses poids. Répondre à une question, c’est de l’inférence : rien n’est réappris.

Les histoires qui en parlent

Le carnet s’ouvre bientôt.Les premières histoires arrivent.