C'est quoi un modèle de langage ?×
mino
FR EN

C'est quoi un modèle de langage, et pourquoi il écrit si bien sans rien savoir ?

La réponse en trois lignes

Un modèle de langage est un programme qui a lu une quantité énorme de texte et qui, mot après mot, devine la suite la plus vraisemblable. C'est de là que vient sa fluidité — et c'est de là que vient son défaut : il vise le vraisemblable, jamais le vrai.

Une phrase qui se complète mot après mot, chaque suite possible avec sa probabilité, et aucune vérification nulle part. Un début de phrase, puis la liste des mots qui pourraient suivre, chacun avec sa part de vraisemblance. Le modèle en choisit un, l'ajoute, et recommence. À aucun moment il ne vérifie quoi que ce soit. Ce qu'il fait, mot après mot « Votre commande sera prête… » Et ensuite ? demain 41 % lundi 23 % sous peu 12 % le reste 24 % Il en prend un, l'écrit, et recommence Nulle part il ne vérifie si c'est vrai Toute sa fluidité vient de là. Tous ses défauts aussi.
Il ne cherche pas ce qui est vrai. Il cherche ce qui suit le plus souvent.

Expliqué à un enfant de 5 ans

Vous connaissez déjà un modèle de langage. Vous en avez un dans la poche.

Quand vous tapez un message sur votre téléphone, une petite barre au-dessus du clavier vous propose le mot suivant. Vous écrivez « je serai là dans », et il propose « cinq », « un », « peu ». Il ne lit pas dans vos pensées : il a simplement observé, des milliers de fois, quels mots viennent après quels autres.

Un modèle de langage, c'est exactement ce mécanisme. Ce qui change, c'est ce qu'il a lu avant : non plus vos messages, mais l'équivalent de bibliothèques entières — des livres, des sites, de la documentation, des conversations.

Et à cette échelle-là, quelque chose bascule. Proposer le mot suivant, des milliers de fois d'affilée, ça finit par ressembler à écrire. Ça finit même par ressembler à réfléchir.

Mais sous le capot, rien n'a changé. Il ajoute un mot, puis le suivant, puis le suivant. Il ne relit pas. Il ne vérifie pas. Il continue.

Le clavier d'un téléphone qui propose le mot suivant, et le même mécanisme à une tout autre échelle. À gauche, le clavier d'un téléphone propose trois mots pour finir votre phrase, après avoir observé votre façon d'écrire. À droite, le même principe, mais nourri par une quantité de texte sans commune mesure. Votre clavier Je serai là dans… cinq un peu Il a lu vos messages Un modèle de langage Je serai là dans… cinq un peu Livres, sites, forums, documentation Il a lu une bibliothèque entière La différence n'est pas de nature. Elle est d'échelle.
Même mécanisme que votre clavier. Ce qui change, c'est tout ce qu'il a lu avant.

Ce que ça veut dire, un peu plus précisément

Il ne sait pas, il continue. C'est la phrase à retenir. Quand vous lui demandez le taux de TVA, il ne va pas le chercher : il produit la suite de mots la plus probable après votre question. Le plus souvent, la suite la plus probable se trouve être la bonne réponse. Le plus souvent n'est pas toujours.

Sa mémoire est celle de la conversation en cours, et elle a un bord. Tout ce que vous lui avez écrit dans l'échange, il l'a sous les yeux. Au-delà d'une certaine longueur, le début sort du cadre. Ce n'est pas de l'oubli, c'est une fenêtre : ce qui n'y est plus n'a jamais existé pour lui.

Il ne connaît pas votre entreprise. Vos tarifs, vos délais, le nom de votre fournisseur : rien de tout cela n'est en lui, sauf si quelqu'un le lui a donné dans l'échange ou branché sur vos documents. Un modèle « qui connaît votre métier » n'existe pas ; un modèle à qui on a donné vos documents, si.

Il est bien meilleur pour transformer que pour trouver. Reformuler, résumer, traduire, classer, extraire d'un texte ce qu'on lui demande : là, il est remarquable, parce que la matière est sous ses yeux. Sortir un fait de nulle part : là, il improvise. C'est la même machine, et ce sont deux fiabilités très différentes.

C'est le moteur, pas la voiture. Un agent IA est un modèle de langage à qui on a donné des outils et le droit de s'en servir. La plupart des produits qu'on vous présente sont un modèle plus un habillage.

Concrètement, chez vous

Prenons quelque chose de banal : un délai qui change.

Vous passez de cinq à trois jours. Ce fait tient en une ligne. Mais il doit maintenant exister sous quatre formes : la fiche produit sur le site, le message aux clients en cours, l'annonce sur vos pages, la réponse à un devis en attente. Chacune avec son ton, sa longueur, ses formules. C'est une heure, et c'est une heure sans intérêt.

Avec un modèle de langage, vous écrivez le fait une fois et vous demandez les quatre formes. Elles arrivent en quelques secondes. Vous les relisez, vous en corrigez deux, vous envoyez.

Regardez bien où est le gain. Ce n'est pas lui qui a décidé du délai, ni de ce qu'il fallait dire. Le fond vient de vous, entièrement. Il n'a fait que l'habiller quatre fois.

C'est la ligne à ne pas perdre de vue quand on choisit ce qu'on lui confie : il ne trouve pas quoi dire, il sait le dire autrement. Tout ce qui tombe de ce côté-là marche très bien. Tout ce qui demande de savoir quelque chose que lui seul irait chercher demande, en plus, une vérification.

Une information et ses dix formes : réécrite à la main d'un côté, déclinée en quelques secondes de l'autre. Avant, la même information est réécrite à la main pour la fiche produit, pour le message au client, pour l'annonce et pour la réponse au devis. Après, elle est écrite une fois et déclinée en quelques secondes, puis relue avant de partir. Le délai passe de 5 à 3 jours Avant La fiche produit Le message aux clients L'annonce La réponse au devis Réécrit à la main, quatre fois environ 1 h Après Les quatre versions sont écrites Chacune dans le bon ton Le fait, lui, ne bouge pas Arrêt : le fond vient de vous environ 10 min On ne lui demande pas quoi dire. On lui demande de le redire.
Il ne trouve pas quoi dire. Il sait le dire autrement.

Ce qu'il ne sait pas faire

Il ne sait pas qu'il se trompe. Une réponse fausse sort du même endroit, avec le même aplomb et la même syntaxe qu'une réponse juste. Rien dans le texte ne les distingue. C'est le sujet entier de l'hallucination, et c'est le défaut à connaître avant tous les autres.

Il ne compte pas bien. Additionner, comparer des montants, tenir un total : ce sont des opérations, et lui produit du texte. Il tombe souvent juste, ce qui est pire que s'il tombait toujours faux. Pour des chiffres, on lui donne un outil de calcul, ou on ne lui demande pas.

Il n'a pas de date du jour. Ce qu'il a lu s'arrête à un moment donné. Sans qu'on lui branche une source récente, il parle du monde tel qu'il était.

Il n'a pas d'avis, même quand il en formule un. Il produit la suite plausible d'une question qui appelle un avis. Ce n'est pas la même chose qu'une opinion, et ça ne remplace pas un conseil de quelqu'un qui engage sa responsabilité.

Attention à ce qu'on vous vend sous ce mot

Méfiez-vous du nom du modèle brandi comme un argument. La version, le nombre de paramètres, le classement du mois : rien de tout cela ne dit ce que l'outil fera chez vous. Ce qui compte est ce qu'on lui donne à lire, et ce qu'on l'autorise à faire.

Méfiez-vous de « il apprend de vos données ». La phrase recouvre deux choses très différentes. Soit on lui donne vos documents au moment de la question — vos données restent où elles sont, et l'outil est utile. Soit on s'en sert pour entraîner le modèle — et là, il faut savoir où elles partent, qui les garde, et pour combien de temps. Demandez laquelle des deux, et demandez-le par écrit.

Méfiez-vous de « il connaît votre secteur ». Un modèle a lu des textes publics sur votre secteur. Il ne connaît ni vos prix, ni vos contraintes, ni vos clients. La connaissance de votre métier n'est pas dans le modèle : elle est dans ce que vous lui branchez.

Et posez celle-ci, qui remet tout à l'endroit :

« Cette réponse, il l'a lue quelque part, ou il vient de l'écrire ? »

Si personne ne sait répondre, vous avez la mesure exacte de la confiance à accorder au résultat.

Les mots qui vont avec

Intelligence artificielle
Le mot-parapluie. Un programme qui apprend à partir d'exemples au lieu de suivre des règles écrites une par une.
IA générative
Celle qui produit quelque chose de nouveau : un texte, une image, un résumé. C'est celle dont tout le monde parle depuis 2023.
Hallucination
Quand l'IA invente une réponse fausse en la présentant avec assurance. Le défaut le plus connu, et le plus mal compris.
Agent IA
Un programme d'IA à qui on confie une tâche du début à la fin, et qui va chercher lui-même ce dont il a besoin pour la finir.
Données d'entraînement
Les exemples à partir desquels une IA a appris. Dis-moi ce qu'elle a vu, je te dirai ce qu'elle sait faire.

Une question, tout de suite ?

Vous n'avez pas besoin d'attendre un autre article. Écrivez à Mina sur WhatsApp : elle répond tous les jours, et il n'y a pas de question bête.