Journal
Ingénierie du contexte
Ce que le contexte signifie réellement pour un modèle d'IA
Un modèle n'a aucune notion de « savoir » quelque chose en dehors de ses poids. Le contexte, c'est les tokens présents dans la fenêtre au moment de l'inférence, point final — ce qui fait de leur origine tout le problème d'ingénierie.