방향(그날의 잡음보다 작은 움직임은 무승부), 확률의 Brier 점수(동전은 0.25), %로 나타낸 오차, 비용을 뺀 100,000달러 가상 포트폴리오. 비교 기준: 동전, “변화 없음”, 사서 보유, S&P 500, Poly World-10, Poly USA-5 대 Poly China-5.

평의회 포트폴리오는 AI들의 비중 평균이며, 첫 거래일 이전에 리그 프로토콜에 확정되었습니다. 평의회의 다른 선들은 비교용 잣대입니다. 이것이 위원회의 주 계산입니다 — 페이지 상단의 숫자, 리그 비용 차감 후. 행동별 포트폴리오는 별도 계산이며 각각 같은 날부터의 S&P 500과 비교합니다.

10년 금리와 VIX는 AI가 지표 자체의 상승이나 하락에 베팅합니다. 포트폴리오에서는 금리 상승 베팅은 IEF의 반대로, 하락 베팅은 IEF로 보유하고, VIX 상승 베팅은 VIXY로, 하락 베팅은 SVXY로 보유합니다.

“하락 때 사기”는 미리 정한 가격입니다. 장중에 가격이 거기에 닿으면 AI가 그 가격에 사고, 닿지 않으면 아무것도 사지 않지만 예측은 그대로 셉니다.

점수에는 기준 가격 전에 봉인된 답만 들어갑니다. 나중에 봉인된 답은 봉인 뒤 첫 가격을 자기만의 기준으로 받습니다.

하루의 12개 지표는 함께 움직이므로 리그는 거래일도 셉니다. 모델은 최소 10거래일에 걸쳐 예측 30개를 낸 뒤에 순위에 들어갑니다.

AI 대 군중: Polymarket(“Up or Down”) 또는 Kalshi(“ET 오후 4시 직전 종가보다 위”)에 일일 질문이 있는 지표에 대해, 우리는 AI에게 군중의 가격을 주지 않고 찾아보지 말라고 요청합니다(질문은 원문 그대로 공개). 출처에 Polymarket이나 Kalshi를 인용한 답변은 이 점수에서 빠집니다. 각 AI 답변은 그 답변이 나온 그 분의 군중 가격과 비교됩니다. Polymarket은 자체 결과로, Kalshi는 자체 행사가(그 사이는 공식 종가)로 채점하며, 각각 따로 집계합니다.

데이터: CC BY 4.0