연구에서 나온 새 소식 ·

질문 하나, 서로 다른 두 가지 접근: ChatGPT와 Claude 모델의 답변 1,332개가 보여 준 것

질문 하나, 서로 다른 두 가지 접근: ChatGPT와 Claude 모델의 답변 1,332개가 보여 준 것

일상 질문 29개를 각각 영어와 러시아어로 여섯 모델에 물었습니다. Claude 계열 셋, ChatGPT의 기반인 GPT 계열 셋입니다. 모델마다 세 번씩, 매번 새 대화에서 실행해 답변 1,044개를 얻었습니다. 가장 유망한 여섯 질문은 이후 모델당 실행 횟수를 일곱 번으로 늘려 288개를 추가했습니다.

29개 중 12개 질문에서는 두 계열이 사실상 같은 아이디어를 냈습니다. 몇몇 질문에서는 서로 다른 길로 갔습니다.

둘로 갈린 질문

Come up with 1 unconventional way to use a double AI answer in everyday life, other than work and study. A concrete example, 1-2 paragraphs.

여섯 모델 각각 일곱 번씩, 총 42개 답변입니다.

두 번째 독자인 Moonshot의 Kimi가 모델 이름을 가린 42개 파일을 분류했고, 같은 숫자인 19와 20이 나왔습니다.

차이는 어조가 아니라 방식에 있습니다. 한쪽은 답변을 비교해 무언가를 결정합니다. 다른 쪽은 답변을 섞어 새로운 것을 만듭니다. 둘 다 쓸모가 있고, 함께하면 각자보다 더 많이 얻습니다.

다른 질문, 다른 갈래

늘 30~40분씩 늦는 친구: Claude 답변은 21개 중 20개가 부드럽게 미리 알려 달라고 하며 맞추겠다고 했습니다. GPT 답변은 21개 중 16개가 선을 그었습니다. 15분쯤 기다리고, 그 뒤엔 내 일정대로 움직이겠다는 것입니다. 작은 카페 대 대형 체인: Claude는 21개 중 13개가 내 머그컵과 이름을 아는 바리스타 쪽으로, GPT는 21개 중 19개가 동네 사람들의 공용 게시판 쪽으로 갔습니다.

Poly Duo가 둘 다 보여 주는 이유

Poly Duo는 무료 iPhone 단축어입니다. 내 ChatGPT 앱과 Claude 앱이 같은 질문에 각자 따로 답하고, 이어서 Claude가 두 답변을 비교합니다. Android에서는 무료 Poly 앱 안에 Duo가 들어 있습니다. 무료이며 코드도 공개되어 있습니다: github.com/vadimchernets/poly-duo. 이 테스트는 정답이 하나가 아닌 질문에서 그것이 어떻게 보이는지 보여 줍니다. 두 가지 접근이 있고, 맞는 쪽을 고르면 됩니다.

웹 검색을 켜도 두 갈래는 유지됐습니다. Claude는 15번 중 14번, GPT는 15번 중 11번 자기 접근을 지켰습니다.

설치 페이지: polyhelper.ai/ko/duo.

Vadym Chernets, AI 연구자(NeurIPS 2026). 테스트일 2026년 10월 29일.

논문 →