Nouveau dans nos recherches ·

Une question, deux démarches différentes : ce que montrent 1 332 réponses de modèles ChatGPT et Claude

Une question, deux démarches différentes : ce que montrent 1 332 réponses de modèles ChatGPT et Claude

Nous avons posé 29 questions du quotidien, chacune en anglais et en russe, à six modèles : trois de la famille Claude et trois de la famille GPT, celle de ChatGPT. Trois essais par modèle, chacun dans une nouvelle conversation. Cela fait 1 044 réponses. Les six questions les plus prometteuses ont ensuite été portées à sept essais par modèle, soit 288 réponses de plus.

Pour 12 des 29 questions, les deux familles ont donné en substance la même idée. Pour quelques-unes, elles ont pris des chemins différents.

La question qui s'est scindée

Come up with 1 unconventional way to use a double AI answer in everyday life, other than work and study. A concrete example, 1-2 paragraphs.

Sept essais pour chacun des six modèles, soit 42 réponses :

Un second lecteur, Kimi de Moonshot, a trié les 42 fichiers sans noms de modèles et est arrivé aux mêmes comptes, 19 et 20.

La différence tient au mécanisme, pas au ton. D'un côté on compare les réponses pour trancher. De l'autre on les mélange pour créer quelque chose de nouveau. Les deux sont utiles, et ensemble elles apportent plus que chacune seule.

D'autres questions, d'autres scissions

Un ami toujours en retard de 30 à 40 minutes : 20 réponses de Claude sur 21 demandaient gentiment d'être prévenu et proposaient de s'adapter ; 16 réponses de GPT sur 21 fixaient une limite : attendre une quinzaine de minutes, puis passer à autre chose. Un petit café face à une chaîne : 13 réponses de Claude sur 21 allaient vers la tasse personnelle et le barista qui connaît votre prénom ; 19 réponses de GPT sur 21 vers un tableau partagé du quartier.

Pourquoi Poly Duo montre les deux

Poly Duo est un raccourci iPhone gratuit : vos propres applis ChatGPT et Claude répondent chacune de leur côté à la même question, puis Claude compare les deux réponses. Sur Android, Duo est intégré à l'appli gratuite Poly. C'est gratuit et open source : github.com/vadimchernets/poly-duo. Ce test montre ce que cela donne sur une question sans réponse unique : deux démarches, et vous gardez celle qui vous convient.

Avec la recherche web activée, la scission est restée : Claude a gardé sa démarche dans 14 essais sur 15, GPT dans 11 sur 15.

Page d'installation : polyhelper.ai/fr/duo.

Vadym Chernets, chercheur en IA (NeurIPS 2026). Test du 29 octobre 2026.

L’article →