Новое из наших исследований ·

Один вопрос, два разных хода: что показали 1332 ответа моделей ChatGPT и Claude

Один вопрос, два разных хода: что показали 1332 ответа моделей ChatGPT и Claude

Мы задали 29 бытовых вопросов, каждый на английском и русском, шести моделям: три из семейства Claude и три из семейства GPT, на котором работает ChatGPT. По три прогона на модель, каждый в новом чате. Получилось 1044 ответа. Шесть самых многообещающих вопросов потом довели до семи прогонов на модель — ещё 288 ответов.

На 12 из 29 вопросов оба семейства дали по сути одну идею. На нескольких пошли разными путями.

Вопрос, который раскололся

Come up with 1 unconventional way to use a double AI answer in everyday life, other than work and study. A concrete example, 1-2 paragraphs.

Семь прогонов у каждой из шести моделей, всего 42 ответа:

Второй читатель, Kimi от Moonshot, разобрал 42 файла без названий моделей и получил те же числа: 19 и 20.

Разница в механизме, а не в тоне. Одна сторона сравнивает ответы, чтобы что-то решить. Другая смешивает ответы, чтобы получить новое. Оба хода полезны, и вместе они дают больше, чем каждый по отдельности.

Другие вопросы, другие расколы

Друг, который всегда опаздывает на 30–40 минут: 20 из 21 ответов Claude мягко просили предупреждать и предлагали подстроиться; 16 из 21 ответов GPT проводили границу: жду минут пятнадцать, потом иду по своим делам. Маленькая кофейня против сети: 13 из 21 ответов Claude шли к своей кружке и баристе, который знает твоё имя; 19 из 21 ответов GPT — к общей доске района.

Почему Poly Duo показывает оба

Poly Duo — бесплатный ярлык для iPhone: ваши собственные приложения ChatGPT и Claude отвечают на один вопрос каждое само, затем Claude сравнивает два ответа. На Android Duo встроен в бесплатное приложение Poly. Всё бесплатно, код открыт: github.com/vadimchernets/poly-duo. Этот тест показывает, как это выглядит на вопросе без единственного верного ответа: два хода, и вы берёте тот, что подходит.

С включённым веб-поиском раскол остался: Claude сохранил свой ход в 14 из 15 прогонов, GPT — в 11 из 15.

Страница установки: polyhelper.ai/ru/duo.

Vadym Chernets, исследователь ИИ (NeurIPS 2026). Тест от 29 октября 2026.

Статья →