ChatGPT vous donne une réponse assurée. Voici les 4 questions qui la font s'effondrer
Une réponse fluide n'est pas une preuve. Quatre questions simples suffisent souvent à faire tomber une certitude trop belle pour être solide.
Auteur : Attuoman Prince Josias
Publié le
Une réponse bien écrite n'est pas une réponse vraie : selon OpenAI (Why language models hallucinate, 2025), l'entraînement et les classements récompensent le fait de deviner plutôt que d'avouer un doute.
Quatre questions à poser avant de répéter une phrase trop lisse : d'où vient ce chiffre (source exacte), que se passe-t-il dans le cas contraire, qu'est-ce qui la rendrait fausse, et qui serait en désaccord.
Elles ne demandent aucun outil payant, seulement trente secondes de friction. À réserver aux réponses qui servent à décider : un prix, une procédure, un fait que vous allez citer.
Ce résumé (uniquement ce résumé, pas l'article) est généré par Claude Sonnet 5, relu et validé par Attuoman Prince Josias, auteur de l'article.
Vous avez demandé un chiffre. ChatGPT vous a rendu trois phrases nettes, une date, un pourcentage, et le ton de quelqu'un qui a vérifié. Vous alliez coller ça dans un mail. Puis vous avez posé une question bête : « Tu peux me donner le lien exact de l'étude ? » Le lien n'existe pas. Le pourcentage non plus, pas sous cette forme. La phrase, elle, restait belle.
On fait confiance à ce qui est bien écrit. Les modèles exploitent exactement ce réflexe. Ils ne « savent » pas au sens humain : ils produisent une suite probable. La suite probable peut être vraie. Elle peut aussi être une construction élégante et fausse, livrée avec le même calme.
Pourquoi l'assurance n'est pas une preuve
En septembre 2025, OpenAI a publié Why language models hallucinate. Le constat est sec : les procédures d'entraînement et d'évaluation récompensent le fait de deviner plutôt que d'admettre une incertitude. Sur un QCM, laisser vide rapporte zéro. Tenter sa chance peut rapporter un point. Les classements mesurent surtout la précision. Dire « je ne sais pas » est donc, pour le modèle, une stratégie perdante.
Le Lab a déjà expliqué pourquoi une IA préfère inventer plutôt que dire qu'elle ne sait pas. Ce guide-ci ne reprend pas le mécanisme. Il vous donne quatre questions à poser dans la conversation, avant de répéter une phrase trop lisse.
Sauf que beaucoup de gens s'arrêtent au style. Fluide, poli, structuré : ça passe pour du vrai. Les quatre questions cassent précisément ce réflexe. Elles ne demandent aucun abonnement. Elles demandent trente secondes de friction.
Les 4 questions qui font tomber une certitude
1. D'où vient ce chiffre, cette date, cette étude ? Si la réponse cite un pourcentage, un papier ou un « rapport de 2024 » sans lien vérifiable, exigez la source exacte : titre, auteurs, URL. Puis allez la lire. Beaucoup de réponses s'arrêtent net, ou inventent un titre plausible. OpenAI, dans le même texte sur les hallucinations, raconte un modèle qui donne trois dates de naissance différentes, toutes fausses, pour la même personne. L'assurance n'avait pas bougé d'un cran.
2. Que se passe-t-il dans le cas contraire ? Prenez l'affirmation principale et inversez-la. Demandez au modèle de défendre l'opposé pendant cinq lignes, avec des sources. S'il y arrive avec la même aisance, son assurance initiale ne valait pas grand-chose. Vous n'avez pas « piégé » l'IA. Vous avez mesuré qu'elle peut plaider les deux bords avec le même ton.
3. Qu'est-ce qui manquerait pour que ce soit faux ? Une réponse solide nomme ses conditions. Une réponse fragile refuse d'envisager l'échec. Posez la question telle quelle : « Dis-moi dans quel cas cette phrase serait fausse, et comment je pourrais le vérifier en dix minutes. » Si le modèle ne vous donne rien de testable, vous n'avez pas un fait. Vous avez une formulation.
4. Qui serait en désaccord, et pourquoi ? S'il n'y a « aucun désaccord raisonnable », méfiance. Sur la plupart des sujets réels, des gens compétents divergent. L'absence totale de nuance n'est pas un signe de vérité. C'est un signal de lissage. Demandez des noms, des camps, des papiers qui contestent. Puis allez voir si ces camps existent.
Ces questions ne demandent aucun outil payant. Elles demandent d'accepter qu'une phrase nette puisse être creuse.
Quand les poser (et quand les laisser)
Pas sur chaque message anodin. Oui dès qu'une réponse sert à décider : un prix, une procédure, un argument que vous allez répéter, un fait que vous allez citer, un conseil que quelqu'un d'autre va suivre. Le coût d'une vérification est ridicule à côté du coût d'une erreur répétée.
Vous pouvez aussi les écrire une fois dans vos instructions de projet, ou dans le message système. Ça n'empêche pas le modèle de deviner : OpenAI le dit, les incitations restent. Ça vous force, vous, à relire. Sur la formulation elle-même, le guide bien formuler ses prompts rappelle qu'autoriser le modèle à dire qu'il ne sait pas réduit déjà une partie des inventions. Les quatre questions viennent après, quand la réponse a l'air trop sûre pour être honnête.
Un dernier réflexe utile : si le modèle cite un papier, ouvrez-le. Pas le résumé du modèle. Le PDF. Les 15 premiers mots d'un titre inventé suffisent souvent à le démasquer dans un moteur de recherche. Au-delà, paraphrasez, ne copiez jamais un pavé.
Questions fréquentes
Est-ce que ça marche avec toutes les IA ?
Oui. Le problème vient du style confiant, pas d'une marque. Les quatre questions testent la solidité, pas le logo.
Et si l'IA admet qu'elle n'est pas sûre ?
C'est déjà mieux. Une incertitude affichée est plus utile qu'une certitude inventée. Vous savez alors où chercher ailleurs, ou si vous devez chercher du tout.
Je n'ai pas le temps de vérifier chaque source.
Alors limitez l'usage de l'IA aux sujets où une erreur vous coûterait peu. Le temps de vérification fait partie du vrai coût de la réponse, pas un extra optionnel.
Est-ce que poser ces questions améliore aussi la prochaine réponse ?
Souvent oui. En forçant le modèle à préciser, contredire ou sourcer, vous obtenez un texte plus prudent. Ça ne remplace pas votre clic sur le lien.
Une newsletter par semaine, gratuite.
Actus IA, tutoriels et outils. Zero spam, desabonnement en 1 clic.
Notez cet article