Réponse courte
Demandez à ChatGPT de défendre délibérément les deux côtés de votre idée : d’abord de présenter le meilleur argument possible en sa faveur, puis d’attaquer cet argument comme le ferait un expert sceptique. Vous jugez ensuite chaque objection vous-même, en gardant celles que vous pouvez vérifier et en écartant les objections vagues ou inventées.
Question de suivi Comment demander le contre-argument le plus fort?
La plupart d’entre nous critiquons mal nos propres projets. Nous savons pourquoi une idée nous plaît, et c’est justement ce qui nous empêche de voir où elle flanche. ChatGPT, le robot conversationnel gratuit qu’OpenAI a ouvert au public le 30 novembre, est étonnamment utile ici, non pas parce qu’il en sait plus que vous, mais parce qu’il défendra n’importe quel point de vue que vous lui demandez, longuement, sans se fatiguer ni se vexer.
Le truc consiste à demander délibérément le désaccord. Laissé à lui-même, un robot conversationnel a tendance à accepter votre cadrage tel quel et à vous aider à avancer. OpenAI note que, lorsqu’une demande est floue, ChatGPT devine habituellement ce que vous vouliez dire plutôt que de poser la question. Si vous écrivez « voici ma super idée, aide-moi à la réaliser », vous obtiendrez de l’aide, pas un examen critique. Cet examen, vous devez le demander.
La méthode « meilleure défense, puis critique »
Deux termes tirés du débat sont utiles. L’homme de paille (strawman) est une version faible d’un argument, montée pour être facile à démolir. L’homme d’acier (steelman) est l’inverse : la version la plus forte et la plus charitable d’un argument, celle que présenterait son meilleur défenseur. Bien tester une idée, c’est d’abord en construire l’homme d’acier, puis attaquer celui-ci, et non une version fragile.
ChatGPT peut jouer les deux rôles dans une même conversation. Lui demander d’abord la meilleure défense a deux avantages. Vous voyez si l’idée peut seulement être énoncée clairement, et la critique qui suit doit composer avec les vraies forces de l’idée plutôt qu’avec ses faiblesses les plus faciles.
Un exemple concret : une camionnette de réparation de vélos
Supposons que vous pensiez à offrir un service de réparation de vélos à partir d’une camionnette qui se rend chez les clients, dans une ville d’environ 10 000 habitants. Voici un prompt qui met en place tout l’exercice :
Je veux mettre une idée d’affaires à l’épreuve. Fais-le en trois parties.
Idée : un service mobile de réparation de vélos à partir d’une camionnette. Je me rends chez les clients, à la maison ou au travail, dans une ville d’environ 10 000 habitants. Mises au point, réparations de crevaisons et ajustements de freins, réservés en ligne.
Partie 1. Meilleure défense : écris l’argument honnête le plus fort en faveur de cette idée, en cinq puces.
Partie 2. Critique : agis maintenant comme un conseiller sceptique en petites entreprises. Donne les cinq problèmes les plus sérieux de l’argument que tu viens de présenter. Pour chacun, dis quel fait ou quel test montrerait si le problème est réel.
Partie 3. Énumère trois questions auxquelles je devrais répondre avant de dépenser un sou.La phrase « quel fait ou quel test montrerait si le problème est réel » est la ligne la plus importante. Elle force chaque objection à être concrète. Une réponse illustrative pourrait comprendre des points comme ceux-ci :
| Objection (illustrative) | Comment la vérifier |
|---|---|
| La demande est peut-être saisonnière; peu de gens roulent l’hiver | Demander aux boutiques locales comment leurs réservations de réparations varient d’un mois à l’autre |
| Le temps de déplacement entre les visites gruge les heures facturables | Tracer une journée type de cinq réservations et chronométrer les trajets |
| Une boutique locale offre peut-être déjà la cueillette | Appeler les boutiques de la ville et poser la question |
| Les pièces doivent être transportées ou commandées d’avance | Dresser la liste des dix réparations les plus courantes et des pièces que chacune exige |
Aucune de ces réponses n’est une preuve. C’est une liste de choses à vérifier. Et c’est exactement ce que vous attendez de cet exercice.
Comment juger les réponses
ChatGPT écrit un texte fluide sur un ton assuré, qu’il ait raison ou non. Le billet de lancement d’OpenAI prévient lui-même qu’il donne parfois des réponses qui semblent plausibles, mais qui sont fausses ou n’ont aucun sens. Les premiers testeurs, comme l’a rapporté The Verge, l’ont vu présenter des détails inventés comme des faits. Traitez donc chaque objection comme une hypothèse, et classez-les en trois piles :
- Vérifiable et pertinente. Vous pouvez la confirmer ou l’écarter par un appel, un décompte ou un petit essai. Gardez celles-là : c’est là qu’est la vraie valeur.
- Générique. « La concurrence pourrait être forte » ou « le marketing pourrait coûter cher » s’appliquent à toutes les entreprises jamais lancées. Faites une relance : « Rends l’objection 3 propre à une ville de 10 000 habitants. »
- Affirmations factuelles invérifiables. S’il cite une statistique sur le marché du vélo ou nomme un règlement, ne vous y fiez pas. Ses connaissances des événements postérieurs à 2021 sont limitées et il n’affiche aucune source; vérifiez donc ces affirmations ailleurs.
Il est aussi utile de relancer la critique. OpenAI dit que le modèle est sensible aux petits changements de formulation et que des essais répétés peuvent produire des réponses différentes. Demandez une nouvelle réponse une ou deux fois. Les objections qui reviennent chaque fois méritent plus d’attention que celles qui n’apparaissent qu’une fois.
À essayer : prenez une décision que vous soupesez cette semaine, comme un achat, un cours ou un projet. Lancez le prompt en trois parties ci-dessus avec vos propres détails, puis classez les objections dans les trois piles. Notez quelle objection vérifiable ne vous serait pas venue à l’esprit.
Comment demander le contre-argument le plus fort?
Soyez explicite sur la force, le rôle et le format. « Quels sont les inconvénients? » invite une liste douce et équilibrée. Nommez plutôt qui argumente et avec quelle vigueur : « Argumente contre cette idée comme un critique incisif qui veut me convaincre de l’abandonner. Donne seulement l’argument le plus fort, en un paragraphe, et ne l’adoucis pas. » Demander un seul argument plutôt que cinq pousse le modèle à choisir son meilleur point au lieu de remplir la liste.
Vous pouvez placer la barre encore plus haut en lui demandant d’anticiper votre défense : « Énonce le contre-argument, puis ma réplique la plus probable, puis pourquoi cette réplique ne suffit pas. » Vous obtenez ainsi un court débat sur la page, qui montre si votre réfutation préférée tient vraiment la route.
Enfin, insistez quand une réponse est faible. ChatGPT est conçu pour fonctionner en dialogue; vous pouvez donc dire : « Cette objection est générique. Donne-en une plus forte que soulèverait une personne qui a dix ans d’expérience dans ce métier. » S’il vous donne raison trop vite quand vous contestez un point, demandez-lui de défendre de nouveau l’autre côté de ce point. Le but n’est pas de gagner un débat contre un robot conversationnel, mais de sortir de la conversation avec une courte liste de questions auxquelles seul le monde réel peut répondre.
Sources
- ChatGPT: Optimizing Language Models for Dialogue — OpenAI, 30 novembre 2022
- OpenAI’s new chatbot can explain code and write sitcom scripts but is still easily tricked — The Verge, 1 décembre 2022