AI 답변을 신뢰할 수 있을까요? 다른 회사의 AI에 물어보세요 — 도구

이 문서는 번역본입니다. 기준이 되는 판본은 영어 원문이며, 인용할 때는 원문을 사용해 주세요.

AI 답변에 따라 행동하기 전에 다른 회사의 AI에 물어보세요. Duocall은 일치하는 부분을 인용하고 모든 차이점을 나열합니다. 무료, API 키 불필요.

Vadym Chernets · open source · 6 min read

View on GitHubgithub.com/vadimchernets/duocall

한 개의 질문이 Claude와 ChatGPT로 각각 전송됩니다. 한 시트에는 둘이 일치한 부분(30% 차이)과 다른 부분이 나열되어 있습니다: 최소 없음 대 5,000 이상, 은행에 신청 대 먼저 보험사에 신청. 영수증에는 누가 답변했는지 표시됩니다. 두 AI가 일치한다는 것이 증거가 아닙니다. 차이점은 확인할 부분을 보여줍니다. — Swipe to see the whole diagram, or tap to open it

당신은 AI가 말한 것에 따라 행동하려고 합니다: 계약에 서명하고, 금액을 지불하고, 기한을 맞추고, 되돌릴 수 없는 편지를 보냅니다. 확인할 가치가 있는 부분을 빠르게 찾는 방법은 다른 회사에서 만든 AI에 물어보고 두 답변이 어디서 달라지는지 보는 것입니다. Duocall이 당신을 위해 그 일을 합니다.

Duocall은 Anthropic의 AI 어시스턴트인 Claude Code를 위한 무료 오픈소스 플러그인입니다. 당신의 컴퓨터의 파일로 작동합니다. 당신의 질문을 변경하지 않은 채로 다른 회사의 AI에 보냅니다: 당신의 컴퓨터에 이미 설치되고 로그인된 프로그램이 있으면 그것을 사용하고, 없으면 브라우저에서 무료로 채팅할 수 있으며, 붙여넣을 정확한 텍스트가 제공됩니다. 그러면 두 개가 일치하는 부분을 보여주고 인용하며, 차이가 나는 모든 부분을 나열합니다: 모든 숫자, 날짜, 이름 및 다음 단계. API 키(일부 AI 서비스가 프로그래머에게 판매하는 유료 액세스 코드), 새로운 계정, 두 번째 구독이 필요하지 않습니다.

두 번째 AI는 왜 필요하고, 왜 다른 회사여야 하는가

사람들은 이미 중요한 질문들을 AI에 제시합니다. 2026년 3월에 발표된 KFF 여론조사에 따르면, 미국 성인의 약 3분의 1(32%)이 건강 정보와 조언을 위해 AI를 찾았다고 답했습니다. 그리고 사람들은 Google에 의심을 입력합니다: "AI 답변을 신뢰할 수 있나요", "ChatGPT는 법률 자문에 신뢰할 수 있나요". 한 AI는 자신에 대해 그것을 확실히 할 수 없습니다. 왜냐하면 확신에 찬 잘못된 답변은 확신에 찬 올바른 답변과 정확히 같게 보이기 때문입니다.

같은 회사의 두 번째 AI는 많은 도움이 되지 않습니다: 한 제조업체의 두 답변은 두 개의 모자를 쓴 한 가지 의견입니다. 350개 이상의 언어 모델에 대한 연구에 따르면, 공유된 아키텍처와 제공자는 오류를 일직선으로 만들고, 한 테스트 세트에서 두 모델이 모두 틀렸을 때 60% 일치했습니다(Kim et al., ICML 2025). 따라서 Duocall은 Claude를 다른 회사의 AI와만 쌍을 이룹니다: OpenAI의 Codex, Google의 Antigravity 또는 Gemini CLI, xAI의 Grok, Moonshot의 Kimi, 또는 Alibaba의 Qwen. 그렇더라도 일치를 증거로 취급하지 않습니다. 자신의 말로: "일치는 명백한 오류가 보이지 않는다는 의미이며, 차이점은 정확히 어디를 살펴봐야 하는지 보여줍니다."

네 가지 명령으로 할 수 있는 것

/duocall:ask는 다른 회사의 AI에게 질문을 보내고 답변을 완전히 가져와서 그들의 것으로 표시합니다. 질문하기 전에 누구에게 물을 것인지 알려줍니다.
/duocall:compare는 두 답변을 나란히 놓습니다. "일치"하는 부분의 모든 줄은 각 답변에서 인용문을 담고 있으며, 양쪽 모두에서 인용할 수 없는 항목은 다른 목록에 들어갑니다. "불일치"는 아무리 작은 차이라도 모든 차이를 나열합니다.
/duocall:deepen은 논쟁이 되는 부분에 대해서만 되돌아갑니다. 하나의 좁은 질문이 양쪽 AI에게 전송되며, 불일치를 명시하지만 누가 무엇을 말했는지는 밝히지 않습니다. 여전히 불일치하면 Duocall은 해결하는 한 가지 단계를 제공합니다. 읽어야 할 문서의 줄이나 정확한 한 가지 질문으로 전화할 사람입니다.
/duocall:who는 네 줄로 마무리하며, 항상 같습니다. 누가 답변했는지, 누가 하지 않았는지, 누가 요청받지 않았는지, 그리고 회사 수로 계산한 총계입니다.

명령을 기억할 필요가 없습니다. "다른 AI에 물어보기" 또는 "두 번째 의견 얻기"면 충분합니다. 현실적인 문제(돈, 건강, 계약, 기한)가 걸려 있을 때는 Claude가 스스로 한 번 두 번째 의견을 제공하며, 이는 당신의 말에 따라 실행됩니다.

구체적인 예

계약을 조기에 취소하면 무엇이 보류되는지 물어봅니다. 한 AI는 잔액의 30%라고 말하고 은행에 신청하라고 지시합니다. 다른 AI는 잔액의 30%이지만 5,000 이상이라고 말하고 먼저 보험사에 신청하라고 지시합니다. 한눈에 보면 답변이 같아 보입니다. Duocall은 두 견적에서 모두 동의한 항목으로 "잔액의 30%"를 표시하고, 두 가지 차이점을 명시합니다. 즉, 작은 잔액에서 두 번째 답변을 더 높게 만드는 최솟값과 누구에게 신청할 것인지입니다. 이것이 계약에서 확인해야 할 두 가지 항목입니다. 그리고 마지막으로 다음 네 가지 항목으로 끝납니다:

답변한 사람: 저(Claude)와 ChatGPT.
답변하지 않은 사람: 없음.
질문하지 않은 것: Gemini — 이 컴퓨터에 없습니다.
합계: 두 회사의 두 가지 의견.

질문이 있는 그대로 전달됩니다

AI는 다른 사람의 답변을 보면 그것에 동의하는 경향이 있습니다. 한 연구에서 사용자가 단순히 잘못된 답변을 제안했을 때 모델의 정확도가 최대 27% 감소했으며(Sharma et al.), 2025년 4월 OpenAI는 "지나치게 긍정적이고 동의하는" ChatGPT 업데이트를 롤백했습니다(TechCrunch). 따라서 Duocall은 질문을 정확히 질문한 그대로 전달합니다: 요약 없음, Claude 답변 첨부 없음, 다른 AI가 "확인"하고 있다는 힌트도 없음. "두 번째 AI에 물어보세요: 치과 치료비에 대해 세금 공제를 받을 자격이 있습니까?"라고 말하면, 콜론 뒤의 질문만 전달됩니다.

두 AI가 모두 편지를 이웃에게 보내는 것처럼 당신의 이름으로 보낼 내용을 작성했을 때, Duocall은 둘을 세 번째 텍스트로 섞지 않습니다. 한 쪽 전체를 받고, 그 옆에 다른 쪽이 더 잘하는 것의 목록이 표시됩니다.

두 번째 프로그램이 없나요? 브라우저가 해결합니다

컴퓨터에 두 번째 AI 프로그램이 없으면 Duocall은 당신의 질문만 담은 짧은 블록을 제공합니다. 브라우저에서 ChatGPT, Gemini 또는 Grok 같은 다른 회사의 무료 채팅을 열고, 붙여넣은 후 답변을 가져오세요. Duocall은 프로그램의 답변과 정확히 같은 방식으로 비교합니다. 프로그램의 월간 한도가 다 떨어지면 Duocall은 이를 명확하게 알려주고, 자동으로 복구된다고 설명하며, 그 사이에 브라우저 경로를 제안합니다.

어떻게 확인했는가

Duocall의 규칙은 모델이 실제로 말하는 것을 대상으로 테스트되며, 문장이 지시 사항에 나타나는지 여부가 아닙니다. 9가지 시나리오는 모델에 기술과 상황(소진된 수당, 두 편지를 혼합하도록 요청, 하나의 답변만 지원하는 협약)을 제시하며, 고정된 텍스트 패턴이 응답을 확인하고 AI가 다른 AI를 판단하지 않습니다. 2026년 10월 10일에 7개 모델에서 기록된 응답은 6개 모델의 9가지 시나리오를 모두 통과했으며, Claude Haiku의 경우 9개 중 8개를 통과했습니다. 플러그인에는 43개의 자동화된 테스트도 있으며, Python 런처는 Windows, Mac 및 Linux에서 확인되었습니다.

Sidecall, Roundcall, Duocall 중 어느 것을 선택할까요?

Duocall에는 같은 아이디어로 만들어진 두 개의 형제 프로젝트가 있습니다.

Duocall (이 페이지)은 다른 회사의 AI 하나에 사람의 의사결정을 위해 평문으로 질문하며, 두 번째 프로그램이 설치되지 않은 경우 브라우저를 통해 작동합니다.
Sidecall은 최대 4개의 AI 커맨드라인 프로그램에 동시에 질문하고 주장별 보고서를 작성합니다. 또한 코드나 계획을 다른 회사의 비평가에게 보냅니다. 이미 터미널에서 AI 도구를 사용하는 사람들에게 적합합니다.
Roundcall은 자신의 Chrome에서 탭을 열어 AI 채팅 웹사이트에 질문합니다.

시작하는 방법

Claude Code 2.1.224 이상(claude update로 최신 버전으로 업데이트할 수 있습니다)과 Python 3이 필요합니다. Claude Code에서 다음을 입력합니다:

/plugin marketplace add https://raw.githubusercontent.com/vadimchernets/poly-a1-plugins/main/.claude-plugin/marketplace.json
/plugin install duocall@poly-a1

첫 번째 줄은 링크를 통해 Poly A1 플러그인 카탈로그를 추가하며, git이나 GitHub 계정이 필요하지 않습니다. 그 다음 /plugin을 열고 Marketplaces로 이동한 후 poly-a1에 대해 자동 업데이트를 켜세요. 그러면 나중에 개선 사항이 자동으로 전달됩니다. Duocall은 당신의 언어로 응답하며, 고정된 문장은 영어, 스페인어, 포르투갈어, 러시아어, 우크라이나어로 미리 준비되어 있습니다.

Duocall은 Vadym Chernets가 만든 Poly A1 플러그인 중 하나입니다. 두 번째 의견은 반드시 다른 회사에서 나와야 한다는 핵심 규칙은 Agreement Is Not Independent Evidence 논문(SSRN 7390698)에 설명되어 있습니다: "두 개의 서로 다른 연구실에서 추출한 쌍이 하나의 연구실에서 추출한 다섯 쌍보다 더 강할 수 있습니다". 코드는 Python의 표준 라이브러리만을 사용하며, Apache-2.0 라이선스로 공개되고 Zenodo에 아카이브되어 있습니다(DOI 10.5281/zenodo.23107731). 모든 것은 github.com/vadimchernets/duocall에 있습니다.

GitHub에서 duocall 보기

Vadym Chernets는 또한 여러 회사의 AI들이 서로의 작업을 검증하는 앱인 Poly A1을 개발합니다.