Comparer deux modèles d'IA côte à côte, sur la même question
Quel modèle répond le mieux à votre question ? Plutôt que de le deviner, mieux vaut comparer deux modèles d’IA sur le même message. ChatJPT le fait en un clic : les deux réponses s’affichent côte à côte, et vous gardez celle que vous préférez. Cet article fait partie du guide pour utiliser ChatJPT.
Pourquoi comparer deux modèles d’IA ?
Aucun modèle n’est le meilleur pour tout. Certains brillent en programmation, d’autres en rédaction, en traduction ou en raisonnement. De plus, les classements publics mesurent des tests standard, pas vos questions à vous.
Comparer deux modèles d’IA sur vos vraies tâches répond à des questions concrètes :
- Le modèle le moins cher suffit-il pour cette tâche ?
- Un modèle qui réfléchit vaut-il son temps de réponse plus long ?
- Le modèle d’un fournisseur canadien ou européen fait-il aussi bien ?
Activer le mode comparaison
Le mode comparaison fonctionne dans les modes Chat et Code :
- Activez l’interrupteur de comparaison, au-dessus de la zone de chat.
- Choisissez le modèle A et le modèle B, même de fournisseurs différents.
- Envoyez votre question, comme d’habitude.
Les deux réponses s’écrivent en même temps, chacune dans sa colonne. Il faut une clé API pour chaque fournisseur utilisé ; l’article Obtenir une clé API explique comment.
Garder la meilleure réponse
Une fois les deux réponses affichées, cliquez sur celle que vous préférez. Elle rejoint alors la conversation, et c’est elle que les deux modèles verront au tour suivant.
ChatJPT vous demande de choisir avant d’envoyer un nouveau message. En effet, la conversation doit garder un fil unique : sans ce choix, les modèles ne sauraient pas quelle réponse poursuivre.
Ce que vous pouvez comparer
La comparaison garde toutes les options du mode normal :
- La réflexion : comparez un modèle qui réfléchit avec un modèle direct, et voyez si le raisonnement change la réponse.
- La recherche web : avec 🌐 activé, chaque modèle cherche de son côté. Comparez leurs sources autant que leurs conclusions.
- Le coût : chaque réponse affiche ses tokens. Ainsi, vous voyez immédiatement l’écart de prix.
Quelques duels utiles
Voici des comparaisons qui révèlent souvent des différences nettes :
- Code : Claude face à GPT, ou Codestral (Mistral) face à DeepSeek.
- Rédaction en français : Mistral, Augure ou Cohere face à un grand modèle américain.
- Rapidité contre profondeur : un modèle « Flash » face à un modèle « Pro » du même fournisseur.
- Actualité : deux modèles avec la recherche web, pour voir lequel trouve les sources les plus fiables.
Pour une question qui mérite une enquête complète, la recherche approfondie IA va plus loin qu’une simple comparaison.
Bonnes pratiques
D’abord, posez exactement la même question, avec les mêmes fichiers joints. Ensuite, testez plusieurs questions typiques de votre usage, pas une seule. Enfin, notez vos préférences avec 👍 et 👎 : vous pouvez ensuite exporter vos réponses favorites.
Comparer deux modèles d’IA régulièrement vous évite de rester sur un modèle par habitude. Les fournisseurs sortent de nouvelles versions chaque mois ; le meilleur choix d’hier n’est pas toujours celui d’aujourd’hui.