# Comment choisir un modèle d’IA pour une tâche à la mi-2024?

Date: 2024-06-08 · Author: Robert Scales · https://guidetoartificialintelligence.com/fr/apprendre/choisir-modele-ia-tache-mi-2024/

**Answer:** Partez de la tâche, pas de la marque. Décidez ce qui compte le plus, comme la qualité, le coût, la confidentialité, la quantité de texte à lire d’un coup ou les outils nécessaires, puis retenez deux ou trois modèles et soumettez-leur les mêmes quelques prompts réels avant de décider.

Trois entreprises offrent maintenant des modèles de premier plan, et chacune les vend en plus d’une taille. OpenAI a GPT-4o, lancé en mai. Anthropic a la famille Claude 3, depuis mars : Haiku, Sonnet et Opus, du plus rapide au plus performant. Google a Gemini 1.5 Pro et, depuis sa conférence I/O de mai, le plus léger Gemini 1.5 Flash. Tous écrivent bien, lisent des images et traitent de longs documents. Les différences se voient dans les détails de votre tâche.

La bonne nouvelle, c’est que vous n’avez pas besoin de trouver le meilleur modèle absolu. Il vous faut celui qui fait votre travail assez bien, à un prix et avec des conditions de confidentialité qui vous conviennent. C’est une question à laquelle vous pouvez répondre avec un test court et structuré.

## Cinq questions à se poser d’abord

1. **La qualité.** La tâche est-elle difficile? Rédiger un courriel est facile pour n’importe lequel. C’est pour analyser un long contrat ou écrire du code délicat que les grands modèles justifient leur prix.
2. **Le coût.** Utilisez-vous une application de clavardage avec un abonnement mensuel, ou payez-vous à l’usage par une API, l’interface de programmation qu’utilisent les développeurs? Les prix des API se calculent en jetons, les morceaux de mots que les modèles lisent et écrivent.
3. **La confidentialité.** Qu’allez-vous y coller? Lisez les conditions d’utilisation des données de chaque fournisseur pour le forfait que vous utilisez, et vérifiez si vos conversations peuvent servir à l’entraînement et si vous pouvez le désactiver.
4. **Le contexte.** Quelle quantité de texte le modèle doit-il lire d’un seul coup? Cette limite est la fenêtre de contexte, mesurée en jetons.
5. **Les outils.** Avez-vous besoin de téléverser des fichiers, de faire lire des images, de naviguer sur le Web ou de parler à voix haute?

## Un tableau de décision pour la mi-2024

| | GPT-4o (OpenAI) | Claude 3 (Anthropic) | Gemini 1.5 (Google) |
|---|---|---|---|
| Qualité | Égale GPT-4 Turbo pour le texte anglais et le code; plus fort dans les autres langues, en vision et en audio | Opus est le plus performant des trois formats; Sonnet équilibre vitesse et compétence | 1.5 Pro pour le travail exigeant; 1.5 Flash pour la vitesse |
| Coût (API) | La moitié du prix de GPT-4 Turbo, et deux fois plus rapide | Par million de jetons en entrée/sortie : Haiku 0,25 $ US/1,25 $ US, Sonnet 3 $ US/15 $ US, Opus 15 $ US/75 $ US | Flash est présenté comme l’option plus économique et plus rapide |
| Accès gratuit en clavardage | Dans ChatGPT, avec des limites de messages | Sonnet alimente claude.ai gratuit; Opus est réservé aux abonnés Pro | 1.5 Pro vient avec l’abonnement Gemini Advanced |
| Contexte | Longs documents; consultez la documentation d’OpenAI pour la limite actuelle | 200 000 jetons | 1 million de jetons pour 1.5 Pro; 2 millions en aperçu pour développeurs |
| Images | Oui | Oui, y compris graphiques et schémas | Oui |

Les chiffres viennent des annonces de chaque entreprise et vont changer. Pour la confidentialité, il n’y a pas de réponse unique par entreprise : les conditions d’un compte de clavardage gratuit, d’un forfait d’entreprise et de l’API peuvent toutes différer.

## Un exemple concret : trois prompts, trois modèles

Supposons que vous rédigez l’infolettre mensuelle d’un office de tourisme régional et que vous voulez choisir un modèle pour ce travail. Choisissez trois prompts qui reflètent le vrai travail, et utilisez exactement la même formulation avec chaque modèle.

**Prompt 1, votre tâche quotidienne :**

```prompt
Tu es rédacteur pour une infolettre touristique régionale lue par des familles et des retraités.
Réécris le texte ci-dessous en un article de 150 mots avec un titre, dans un style chaleureux et simple. Garde chaque date, chaque lieu et chaque prix exactement tels quels.

[collez les notes brutes du mois dernier]
```

**Prompt 2, un fait que vous connaissez déjà :** « Nomme les trois plus grands lacs de notre région, avec leur superficie. » Choisissez une question dont vous pouvez vérifier la réponse, pour voir quel modèle invente des chiffres.

**Prompt 3, un test de format :** « Transforme cette liste de 12 événements en tableau avec les colonnes Date, Événement, Lieu et Prix, triées par date. N’ajoute aucun événement. »

Notez chaque réponse de 0 à 2 pour l’exactitude, le respect des consignes et le ton, et notez la vitesse et le coût. Une grille remplie pourrait ressembler à ceci (notes à titre d’illustration) :

| Modèle | Prompt 1 | Prompt 2 | Prompt 3 | Total |
|---|---|---|---|---|
| Modèle A | 6 | 3 | 6 | 15 |
| Modèle B | 5 | 5 | 6 | 16 |
| Modèle C | 6 | 4 | 5 | 15 |

Des totaux serrés sont fréquents. Dans ce cas, ce sont habituellement le coût, les conditions de confidentialité et les outils dont vous avez besoin qui tranchent.

> **À essayer :** choisissez une vraie tâche de votre semaine et soumettez-la, mot pour mot, aux versions gratuites de ChatGPT, de Claude et de Gemini. Notez chaque réponse pour l’exactitude, les consignes et le ton, et gardez la grille pour la prochaine fois.

## Quels tests faire avant de vous engager?

Testez avec votre propre matériel. Les résultats publics aux bancs d’essai vous disent quel modèle est fort en moyenne; ils ne vous disent pas lequel gère vos documents, votre vocabulaire et votre public. Trois à cinq prompts tirés de votre vrai travail valent plus que n’importe quel palmarès.

Glissez-y un piège. Au moins un prompt devrait avoir une réponse que vous connaissez déjà, de préférence un chiffre ou un nom précis. Les modèles diffèrent dans la fréquence à laquelle ils comblent les trous avec des suppositions présentées avec assurance, et c’est l’échec que vous devez absolument voir avant de vous fier à l’un d’eux.

Testez les limites que vous allez atteindre. Si vous comptez lui fournir des rapports de 80 pages, testez un rapport de 80 pages, et posez une question sur un détail vers la fin. Si vous allez y coller des renseignements sur vos clients, lisez les conditions de confidentialité du forfait exact que vous utiliserez avant d’y mettre le premier vrai document.

Soumettez chaque prompt plus d’une fois. Les réponses varient d’un essai à l’autre, alors une seule bonne réponse peut relever de la chance. Deux ou trois essais vous montrent si un modèle est constamment bon ou seulement impressionnant à l’occasion. Puis refaites le test aux quelques mois, parce que les modèles, leurs prix et leurs conditions changent rapidement.

## Sources

- Hello GPT-4o: https://openai.com/index/hello-gpt-4o/
- Introducing the next generation of Claude: https://www.anthropic.com/news/claude-3-family
- Google I/O 2024: An I/O for a new generation: https://blog.google/inside-google/message-ceo/google-io-2024-keynote-sundar-pichai/