Нове з наших досліджень ·

Одне питання, два різні ходи: що показали 1332 відповіді моделей ChatGPT і Claude

Одне питання, два різні ходи: що показали 1332 відповіді моделей ChatGPT і Claude

Ми поставили 29 побутових питань, кожне англійською та російською, шести моделям: три з родини Claude і три з родини GPT, на якій працює ChatGPT. По три прогони на модель, кожен у новому чаті. Вийшло 1044 відповіді. Шість найперспективніших питань потім довели до семи прогонів на модель — ще 288 відповідей.

На 12 із 29 питань обидві родини дали по суті одну ідею. На кількох пішли різними шляхами.

Питання, яке розкололося

Come up with 1 unconventional way to use a double AI answer in everyday life, other than work and study. A concrete example, 1-2 paragraphs.

Сім прогонів у кожної з шести моделей, разом 42 відповіді:

Другий читач, Kimi від Moonshot, розібрав 42 файли без назв моделей і отримав ті самі числа: 19 і 20.

Різниця в механізмі, а не в тоні. Одна сторона порівнює відповіді, щоб щось вирішити. Інша змішує відповіді, щоб отримати нове. Обидва ходи корисні, і разом вони дають більше, ніж кожен окремо.

Інші питання, інші розколи

Друг, який завжди запізнюється на 30–40 хвилин: 20 із 21 відповідей Claude м'яко просили попереджати й пропонували підлаштуватися; 16 із 21 відповідей GPT проводили межу: чекаю хвилин п'ятнадцять, а далі займаюся своїми справами. Маленька кав'ярня проти мережі: 13 із 21 відповідей Claude йшли до власного кухля й баристи, який знає твоє ім'я; 19 із 21 відповідей GPT — до спільної дошки району.

Чому Poly Duo показує обидва

Poly Duo — безкоштовний ярлик для iPhone: ваші власні застосунки ChatGPT і Claude відповідають на одне питання кожен сам, потім Claude порівнює дві відповіді. На Android Duo вбудований у безкоштовний застосунок Poly. Усе безкоштовно, код відкритий: github.com/vadimchernets/poly-duo. Цей тест показує, як це виглядає на питанні без єдиної правильної відповіді: два ходи, і ви берете той, що підходить.

Із ввімкненим вебпошуком розкол залишився: Claude зберіг свій хід у 14 із 15 прогонів, GPT — в 11 із 15.

Сторінка встановлення: polyhelper.ai/uk/duo.

Vadym Chernets, дослідник ШІ (NeurIPS 2026). Тест від 29 жовтня 2026.

Стаття →