Aller au contenu principal

Qu'est-ce qu'un LLM ?

Débutant

Un grand modèle de langage (LLM, pour Large Language Model) — la technologie derrière Claude — fait une chose d'une simplicité trompeuse : il lit du texte et prédit ce qui vient ensuite, un fragment à la fois. C'est tout. Tout le reste découle du fait qu'il le fasse extraordinairement bien.

What you'll learn
  • Saisir le modèle mental en une phrase : un LLM est une saisie semi-automatique très sophistiquée
  • Voir comment le modèle construit une réponse un token à la fois, en boucle
  • Comprendre pourquoi ce mécanisme explique à la fois ses forces et ses bizarreries
  • Savoir ce qu'un LLM N'EST PAS — et comment cela change votre façon de l'utiliser

Le modèle mental en une phrase​

Un LLM est une saisie semi-automatique très sophistiquée qui a lu une quantité énorme de texte et appris les schémas de la façon dont le langage — et les idées qu'il contient — ont tendance à se poursuivre.

Quand vous posez une question, le modèle ne « cherche » pas une réponse. Il génère la continuation la plus plausible de votre texte, token par token (voir Tokens et contexte). Les continuations plausibles d'une bonne question sont généralement de bonnes réponses — et c'est pour cela que ça fonctionne.

:::tip Analogie : le clavier prédictif sous stéroïdes Pensez à la saisie semi-automatique de votre téléphone qui suggère le mot suivant. Imaginez maintenant qu'elle ait lu la plupart des livres, articles et codes sur internet — et qu'elle suggère non pas juste le mot suivant, mais tout un essai, une traduction ou un programme qui colle. C'est l'intuition derrière un LLM. :::

Un token à la fois​

Tout le moteur est une boucle : lire tout ce qui précède, prédire le fragment suivant, l'ajouter, recommencer.

Guided walkthrough1 of 4
  1. Le modèle prend votre prompt plus tout ce qui a été généré jusqu'ici comme un seul bloc de texte.

Chaque étape ne prédit jamais qu'un token, puis réinjecte le texte légèrement plus long. Le modèle n'a aucun plan d'ensemble de la réponse à l'avance — la cohérence émerge du fait de réaliser cette prédiction extrêmement bien, des milliers de fois. La façon dont se comporte l'étape « choisir un token » (glouton ou un peu aléatoire) est ce qu'ajustent les contrôles d'échantillonnage comme la température.

Pourquoi cela explique ses forces​

Parce qu'il a appris des schémas à travers l'écriture, le code et le raisonnement, un LLM peut avec fluidité écrire, résumer, traduire, expliquer et coder — des tâches qui reviennent toutes à « poursuivre ce texte de façon sensée ». Donnez-lui une amorce claire et il produit une continuation solide. C'est pour cela que le prompting compte tant : vous façonnez le début du texte qu'il poursuit.

Pourquoi cela explique ses bizarreries​

Le même mécanisme explique les aspérités :

  • Il peut avoir tort avec assurance. Une continuation qui sonne juste n'est pas toujours vraie — c'est l'hallucination.
  • Il ne « connaît » pas vraiment les faits d'aujourd'hui à moins que vous ne les lui fournissiez ou qu'il dispose d'un outil pour les chercher.
  • Il n'a aucune mémoire entre les conversations, à moins que vous ne lui en donniez une.

Ce qu'un LLM n'est pas​

:::warning Ajustez vos attentes et vous obtiendrez de meilleurs résultats

  • ❌ Pas une base de données ni un moteur de recherche. Il génère, il ne récupère pas des enregistrements vérifiés.
  • ❌ Pas une calculatrice. Il peut raisonner sur les mathématiques mais n'est pas garanti exact — donnez-lui des outils pour cela.
  • ❌ Pas une personne. Aucun sentiment, aucune intention, aucune mémoire continue. C'est un puissant moteur de texte. :::

Considérez-le comme un assistant brillant, rapide et cultivé qui se trompe parfois de souvenir — et vérifiez ce qui compte.

Termes clés​

Révisez les concepts fondamentaux
Appuyez sur Entrée ou Espace pour retourner la carte. Utilisez les flèches gauche et droite pour naviguer entre les cartes.Terme affiché.
1 / 5
Key takeaways
  • Un LLM est une saisie semi-automatique très sophistiquée — il prédit le token suivant, il ne cherche pas une réponse
  • La cohérence émerge de l'exécution de cette boucle de prédiction un token à la fois, des milliers de fois
  • Le même mécanisme explique ses forces (écrire, résumer, traduire, expliquer, coder) et ses bizarreries (tort avec assurance, pas de faits en direct, pas de mémoire)
  • Ce n'est ni une base de données, ni une calculatrice, ni une personne — vérifiez ce qui compte

Testez-vous​

Testez-vous

0/3
  1. Que fait fondamentalement un LLM quand vous lui posez une question ?
  2. Pourquoi un LLM peut-il avoir tort avec assurance ?
  3. Quelle affirmation à propos d'un LLM est correcte ?

Pour aller plus loin​