Definitions
Le raisonnement latent est l'idée qu'un modèle de langage peut porter une partie de son processus de raisonnement à l'intérieur de vecteurs d'états cachés continus au lieu de seulement par des mots explicites. Dans un LLM, l'invite est projetée en représentations haute dimension, transformée par des couches de modèles, et décodée en texte. La recherche sur le raisonnement latent traite un état caché modèle comme une représentation réutilisable d'une pensée intermédiaire, permettant ainsi au raisonnement de continuer directement dans l'espace latent.
Latent reasoning is the idea that a language model can carry part of its reasoning process inside continuous hidden-state vectors instead of only through explicit words. In an LLM, the prompt is projected into high-dimensional representations, transformed through model layers, and decoded into text. Research on latent reasoning treats a model final hidden state as a reusable representation of an intermediate thought, allowing reasoning to continue directly in latent space.
“Instead of forcing every reasoning step into written text, an experiment may feed a hidden-state vector back into the model and let the next step happen in latent space.”