我们研究中的新发现 ·

一个问题,两种不同的思路:ChatGPT 与 Claude 模型的 1,332 条回答说明了什么

一个问题,两种不同的思路:ChatGPT 与 Claude 模型的 1,332 条回答说明了什么

我们提出了 29 个日常问题,每个都用英语和俄语各问一遍,对象是六个模型:三个来自 Claude 家族,三个来自 ChatGPT 背后的 GPT 家族。每个模型跑三次,每次都在全新的对话里,共得到 1,044 条回答。最有希望的六个问题之后把每个模型的运行次数增加到七次,新增 288 条。

在 29 个问题中,有 12 个问题两个家族给出的基本是同一个想法。有几个问题,它们走了不同的路。

分成两路的那个问题

Come up with 1 unconventional way to use a double AI answer in everyday life, other than work and study. A concrete example, 1-2 paragraphs.

六个模型各跑七次,共 42 条回答:

第二位读者,Moonshot 的 Kimi,在不看模型名称的情况下对这 42 个文件分类,得到了同样的数字:19 和 20。

差别在于机制,而不是语气。一方是比较答案,用来做决定;另一方是混合答案,用来创造新东西。两者都有用,合在一起比任何单独一方给得更多。

其他问题,其他分歧

总是迟到 30 到 40 分钟的朋友:Claude 的 21 条回答中有 20 条温和地请对方提前告知,并表示自己愿意配合;GPT 的 21 条中有 16 条划了一条线:最多等 15 分钟左右,之后就去忙自己的事。小咖啡店对大连锁:Claude 的 21 条中有 13 条走向自己的马克杯和记得你名字的咖啡师;GPT 的 21 条中有 19 条走向街区共用的留言板。

为什么 Poly Duo 把两种都展示出来

Poly Duo 是免费的 iPhone 快捷指令:你自己的 ChatGPT 和 Claude 应用各自独立回答同一个问题,然后由 Claude 比较两个回答。在 Android 上,Duo 内置在免费的 Poly 应用里。免费且开源:github.com/vadimchernets/poly-duo。这个测试展示的就是面对没有唯一正确答案的问题时它的样子:两种思路,你留下适合自己的那一种。

开启联网搜索后,分歧依然存在:Claude 在 15 次中有 14 次保持了自己的思路,GPT 在 15 次中有 11 次。

安装页面: polyhelper.ai/zh/duo.

Vadym Chernets,AI 研究者(NeurIPS 2026)。测试日期 2026 年 10 月 29 日。

论文 →