आज के ट्रेंड पर वापस: मेटा का AI सहायक, जो आपके लिए काम करता है, अब आपकी घड़ी में भी आ गया है
Poly रेटिंग · आज के ट्रेंड से

सर्वश्रेष्ठ AI एजेंट बेंचमार्क 2026: प्रति डॉलर शीर्ष 10 एजेंट

प्रिंसटन विश्वविद्यालय के स्वतंत्र GAIA पुनः-परीक्षणों में Claude Opus 4.1 High ने $562 खर्च करके 68.48% स्कोर किया, जबकि Claude Sonnet 4.5 ने $178 में 74.55% स्कोर किया।

  • नंबर 1: Claude Sonnet 4.5 (HAL Generalist Agent)
  • 10 स्थान

01अंतिम सूची

अग्रणी AI ने स्वतंत्र रूप से अपनी-अपनी दस स्थानों की सूची बनाई। यहाँ एक आसानी से जाँचा जा सकने वाला नतीजा है: हर स्थान का कारण, स्रोत और उसे शामिल करने वाले AI की सूची है।

क्रम: सबसे अधिक AI सहमति से सबसे कम तक।

चमकीला बैज: इस AI ने प्रविष्टि अपनी सूची में रखी। फीका बैज: नहीं रखी।

  1. 1

    Claude Sonnet 4.5 (HAL Generalist Agent)

    सत्यापित GAIA स्कोर में सबसे ऊँचा (74.55%) और लेवल 3 में भी सबसे ऊँचा (65.39%), $178.20 प्रति रन में। HAL इसे पैरेटो-ऑप्टिमल (सबसे अच्छा संतुलन) मानता है। Opus 4.1 High 3 गुना महँगा है और उसका स्कोर कम है।

    शामिल किया: Claude, ChatGPT, Kimi. शामिल नहीं किया: Meta, Grok, Gemini, Nova, Wenxin, DeepSeek.

    उनकी सूचियों में: Claude: 1 · ChatGPT: 1 · Kimi: 1

    हर AI ने क्या नोट किया 3
    • Claudeस्थान 1

      एकमात्र रन जिसने कुल मिलाकर 74% और लेवल 3 पर 65% पार किया, लगभग $1.45 प्रति हल किए सवाल पर। HAL इसे पारेटो-ऑप्टिमल बताता है।

    • ChatGPTस्थान 1

      इसने $178.20 में पूरे रन में वैलिडेशन सेट के लगभग तीन-चौथाई सवाल हल किए, और लेवल 3 पर 65.39% के साथ इस सूची में सबसे आगे है।

      स्रोत ↗
    • Kimiस्थान 1

      बोर्ड पर सत्यापित सबसे ऊँची सटीकता (74.55%) और सबसे कठिन स्तर का सबसे ऊँचा स्कोर (65.4%), प्रति कार्य लगभग एक डॉलर में।

      स्रोत ↗
    3 AI ने इसे यहाँ रखा
  2. 2

    Claude 3.7 Sonnet High (HAL Generalist Agent)

    फ़रवरी 2025 का मॉडल, जो $122.49 में कुल मिलाकर 64.24% और लेवल 3 पर 57.69% स्कोर करता है। लागत के लगभग पाँचवें हिस्से में यह नए Opus 4.1 High को लेवल 3 पर पीछे छोड़ देता है।

    शामिल किया: Claude, ChatGPT, Kimi. शामिल नहीं किया: Meta, Grok, Gemini, Nova, Wenxin, DeepSeek.

    उनकी सूचियों में: Claude: 4 · ChatGPT: 2 · Kimi: 2

    हर AI ने क्या नोट किया 3
    • Claudeस्थान 4

      फ़रवरी 2025 का एक मॉडल अब भी लेवल 3 पर 57.69% पाता है, जो GPT-5 Medium के 46% से आगे है, लगभग $1.16 प्रति हल किए सवाल पर।

      स्रोत ↗
    • ChatGPTस्थान 2

      यह शीर्ष नेता से 10.31 अंक पीछे है, पर प्रति अनुमानित सही उत्तर पर लगभग 31% कम खर्च करता है और लेवल 3 पर 57.69% पाता है।

      स्रोत ↗
    • Kimiस्थान 2

      फ़रवरी 2025 का मॉडल जो नए Opus 4.1 High को सबसे कठिन स्तर पर पीछे छोड़ता है (57.7% बनाम 53.8%), पाँचवें हिस्से की लागत पर।

      स्रोत ↗
    3 AI ने इसे यहाँ रखा
  3. 3

    ओपनएआई o4-mini Low (HAL Generalist Agent)

    $73.26 प्रति रन पर पैरेटो-ऑप्टिमल। लेवल 3 पर (53.85%) यह $562 वाले Opus 4.1 High के बराबर है, पर कुल मिलाकर नेता से 16 अंक पीछे है।

    शामिल किया: Claude, ChatGPT, Kimi. शामिल नहीं किया: Meta, Grok, Gemini, Nova, Wenxin, DeepSeek.

    उनकी सूचियों में: Claude: 2 · ChatGPT: 4 · Kimi: 3

    हर AI ने क्या नोट किया 3
    • Claudeस्थान 2

      यह कुल मिलाकर 58% और सबसे कठिन स्तर पर 53.85% तक पहुँचता है, लगभग $0.76 प्रति हल किए सवाल पर। HAL की तालिका में कीमत और लेवल 3 की ताकत का यह सबसे अच्छा मेल है।

      स्रोत ↗
    • ChatGPTस्थान 4

      इन दस में सबसे सस्ता अनुमानित सफल उत्तर लगभग $0.76 है, हालाँकि इसका कुल स्कोर शीर्ष से 16.37 अंक नीचे है।

      स्रोत ↗
    • Kimiस्थान 3

      सबसे कठिन स्तर पर $562 के Claude Opus 4.1 High रन के बराबर रहता है (ठीक 53.85%), जबकि पूरा रन $73.26 में बैठता है।

      स्रोत ↗
    3 AI ने इसे यहाँ रखा
  4. 4

    Claude Sonnet 4.5 High, extended thinking (HAL Generalist Agent)

    Extended thinking की लागत लगभग उतनी ही है जितनी साधारण Sonnet 4.5 की ($179.86 बनाम $178.20)। कुल मिलाकर यह 3.64 अंक कम स्कोर करता है और लेवल 3 को 65.39% से गिराकर 46.15% कर देता है।

    शामिल किया: Claude, ChatGPT, Kimi. शामिल नहीं किया: Meta, Grok, Gemini, Nova, Wenxin, DeepSeek.

    उनकी सूचियों में: Claude: 7 · ChatGPT: 6 · Kimi: 9

    हर AI ने क्या नोट किया 3
    • Claudeस्थान 7

      विस्तारित सोच (extended thinking) की लागत लगभग एक-सी रही ($179.86 बनाम $178.20), पर सटीकता 3.6 अंक घटी और लेवल 3 65% से गिरकर 46% हो गया।

      स्रोत ↗
    • ChatGPTस्थान 6

      High प्रयास मानक Sonnet रन से थोड़ा ही ज़्यादा खर्च करता है, पर कुल मिलाकर 3.64 अंक और लेवल 3 पर 18.08 अंक कम स्कोर करता है।

      स्रोत ↗
    • Kimiस्थान 9

      अधिक तर्क के लिए भुगतान करने से ज़मीन खोती है: वही मॉडल सामान्य प्रयास पर इससे कुल मिलाकर 4 अंक और सबसे कठिन स्तर पर 19 अंक ऊपर है, उसी कीमत पर।

      स्रोत ↗
    3 AI ने इसे यहाँ रखा
  5. 5

    Claude Haiku 4.5 (HAL Generalist Agent)

    छोटा मॉडल लेवल 3 पर 61.54% स्कोर करता है, जो सूची में दूसरा सबसे ऊँचा है और अपने ही लेवल 2 के 51.16% से ऊपर है। यह प्रति हल किए गए सवाल लगभग $1.41 बैठता है (अनुमान)।

    शामिल किया: Claude, ChatGPT, Kimi. शामिल नहीं किया: Meta, Grok, Gemini, Nova, Wenxin, DeepSeek.

    उनकी सूचियों में: Claude: 5 · ChatGPT: 3 · Kimi: 5

    हर AI ने क्या नोट किया 3
    • Claudeस्थान 5

      सस्ता Claude मॉडल लेवल 3 पर 61.54% पाता है, जो उसके अपने लेवल 2 के स्कोर 51.16% से बेहतर है।

      स्रोत ↗
    • ChatGPTस्थान 3

      इसका लेवल 3 स्कोर 61.54% यहाँ सूचीबद्ध सबसे ऊँचे दूसरे नंबर का है, प्रति अनुमानित सही उत्तर लगभग $1.41 पर।

      स्रोत ↗
    • Kimiस्थान 5

      उस परिवार का 'छोटा' मॉडल पूरे बोर्ड पर दूसरे-सबसे-कठिन स्तर का स्कोर लाता है: लेवल 3 पर 61.5%।

      स्रोत ↗
    3 AI ने इसे यहाँ रखा
  6. 6

    GPT-5 Medium (HF Open Deep Research)

    HAL के Generalist एजेंट में यही मॉडल 3.41 अंक ज़्यादा स्कोर करता है, पर उसकी लागत लगभग 3.4 गुना ($359.83) है। ढाँचा कीमत को मॉडल से ज़्यादा बदलता है।

    शामिल किया: Claude, ChatGPT, Kimi. शामिल नहीं किया: Meta, Grok, Gemini, Nova, Wenxin, DeepSeek.

    उनकी सूचियों में: Claude: 10 · ChatGPT: 9 · Kimi: 7

    हर AI ने क्या नोट किया 3
    • Claudeस्थान 10

      यह 62.8% स्कोर करता है, जो HAL की तालिका में #7 है। फिर भी $359.83 पर यह वही मॉडल HAL Generalist एजेंट के भीतर से लगभग 3.4 गुना महँगा है।

      स्रोत ↗
    • ChatGPTस्थान 9

      यह HAL Generalist GPT-5 Medium रन को सटीकता में 3.41 अंक से पीछे छोड़ता है, पर रिपोर्ट किया गया खर्च लगभग 3.4 गुना ज़्यादा है।

      स्रोत ↗
    • Kimiस्थान 7

      नए, ज़्यादातर निजी v5 इंडेक्स पर यह $10.04 वाले नेता से 3 अंक पीछे रहकर $1.27 प्रति कार्य पर आता है, यानी कीमत का एक-आठवाँ हिस्सा।

      स्रोत ↗
    3 AI ने इसे यहाँ रखा
  7. 7

    GPT-5 Medium (HAL Generalist Agent)

    $104.75 में 59.39%, प्रति हल किए गए सवाल लगभग $1.07 (अनुमान)। वही मॉडल HF Open Deep Research के भीतर $359.83 में चलता है।

    शामिल किया: Claude, Kimi. शामिल नहीं किया: ChatGPT, Meta, Grok, Gemini, Nova, Wenxin, DeepSeek.

    उनकी सूचियों में: Claude: 3 · Kimi: 4

    हर AI ने क्या नोट किया 2
    • Claudeस्थान 3

      इसकी लागत लगभग $1.07 प्रति हल किए सवाल है, जबकि वही मॉडल HF Open Deep Research के भीतर लगभग $3.47 लेता है। कीमत को मॉडल से ज़्यादा ढाँचा (मॉडल के चारों ओर का सेटअप) बदलता है।

      स्रोत ↗
    • Kimiस्थान 4

      59% से आगे का सबसे सस्ता सत्यापित रास्ता: पूरे रन के लिए $104.75, लगभग $0.63 प्रति कार्य।

      स्रोत ↗
    2 AI ने इसे यहाँ रखा
  8. 8

    ओपनएआई o4-mini High (HAL Generalist Agent)

    $59.39 पर पैरेटो-ऑप्टिमल, और मज़बूत रनों में प्रति हल किए गए सवाल के हिसाब से सबसे सस्ता, लगभग $0.66 (अनुमान)। इसका लेवल 3 स्कोर 46.15% है, इसलिए यह o4-mini Low से नीचे रहता है।

    शामिल किया: Claude, Kimi. शामिल नहीं किया: ChatGPT, Meta, Grok, Gemini, Nova, Wenxin, DeepSeek.

    उनकी सूचियों में: Claude: 6 · Kimi: 6

    हर AI ने क्या नोट किया 2
    • Claudeस्थान 6

      प्रति हल किए सवाल पर यह सबसे सस्ता है, लगभग $0.66। पर लेवल 3 पर इसका 46% स्कोर ही मुख्य कारण है कि यह o4-mini Low से नीचे रहता है।

      स्रोत ↗
    • Kimiस्थान 6

      $59.39 में पूरा 165-कार्य रन। यह सबसे सस्ती पारेटो-ऑप्टिमल प्रविष्टि है जो अब भी 54% पार करती है।

      स्रोत ↗
    2 AI ने इसे यहाँ रखा
  9. 9

    Claude Opus 4.1 High (HAL Generalist Agent)

    $562.24 में 68.48%, प्रति हल किए गए सवाल लगभग $4.97 (अनुमान)। यह Sonnet 4.5 की प्रति हल किए गए सवाल की लागत का लगभग 3.4 गुना है, और इसकी सटीकता कम है।

    शामिल किया: Claude, ChatGPT. शामिल नहीं किया: Meta, Grok, Gemini, Nova, Kimi, Wenxin, DeepSeek.

    उनकी सूचियों में: Claude: 9 · ChatGPT: 7

    हर AI ने क्या नोट किया 2
    • Claudeस्थान 9

      यह 68.5% स्कोर करता है, पर इसकी लागत $562 है, यानी प्रति हल किए सवाल लगभग $5। यह Sonnet 4.5 की प्रति हल किए सवाल लागत का लगभग 3.4 गुना है, और सटीकता कम है।

      स्रोत ↗
    • ChatGPTस्थान 7

      यह Sonnet 4.5 से 5.06 सटीकता-अंक पीछे है, और पूरे रन के लिए तीन गुने से ज़्यादा खर्च करता है।

      स्रोत ↗
    2 AI ने इसे यहाँ रखा
  10. 10

    Gemini 2.0 Flash (HAL Generalist Agent)

    पूरे GAIA रन की कीमत सिर्फ़ $7.80 है, यह पैरेटो-ऑप्टिमल है, और नेता से लगभग 23 गुना सस्ता है। कठिन कामों पर यह ढह जाता है: लेवल 3 पर 11.54%। इसे सूची में केवल एक AI ने रखा है।

    शामिल किया: Kimi. शामिल नहीं किया: Claude, ChatGPT, Meta, Grok, Gemini, Nova, Wenxin, DeepSeek.

    उनकी सूचियों में: Kimi: 10

    हर AI ने क्या नोट किया 1
    • Kimiस्थान 10

      $7.80 में पूरा GAIA रन, यानी लीडर की लागत का 1/23, जबकि उसकी 44% सटीकता बनी रहती है।

      स्रोत ↗
    1 AI ने इसे यहाँ रखा

शीर्ष तीन के बारे में और ↓

02शीर्ष तीन के बारे में और

रैंकिंग ऊपर है। यहाँ शीर्ष तीन स्थानों के बारे में और जानकारी है: वे क्या हैं, यहाँ क्यों हैं, और क्या जानना उपयोगी है।

तीनों प्रिंसटन विश्वविद्यालय की एक ही GAIA तालिका से हैं, लेकिन हर रन की लागत अलग है और सबसे कठिन स्तर (लेवल 3) पर वे कितना अच्छा करते हैं, यह भी अलग है। इसलिए कुल स्कोर और कीमत दो अलग दिशाओं में खींचते हैं।

1Claude Sonnet 4.5 (HAL Generalist Agent)

नं. 1 — Claude Sonnet 4.5 (HAL Generalist Agent). 9 में से 3 AI की सूचियों में; वहाँ मध्य स्थान: 1. इसका सत्यापित GAIA स्कोर सबसे ऊँचा है और सबसे कठिन स्तर पर स्कोर भी सबसे ऊँचा है, और यह Opus 4.1 High से कहीं सस्ता पड़ता है।

क्या आप जानते हैं

  • HAL के GAIA बोर्ड पर, Claude Sonnet 4.5 बिना अतिरिक्त सोच की सेटिंग के (74.55%) अपने “High” संस्करण (70.91%) से आगे निकल जाता है। यहाँ ज़्यादा सोचने से बेहतर स्कोर नहीं मिला। Opus 4.1 High 68.48% के साथ तीसरे नंबर पर रहा।

यह क्या है
एंथ्रोपिक का Claude Sonnet 4.5, जिसे प्रिंसटन विश्वविद्यालय की GAIA परीक्षा में सामान्य एजेंट के रूप में चलाया गया।
इसकी बढ़त
तीनों में सबसे ऊँचा कुल स्कोर (74.55%) और लेवल 3 का सबसे ऊँचा स्कोर (65.39%)।
किसके लिए सही
उनके लिए जो सबसे ऊँचा स्कोर चाहते हैं; सबसे सस्ता रन नहीं, क्योंकि यह $178 लगाता है।
  • GAIA: प्रति डॉलर सटीकता$178.20 में 74.55%

Wikidata

यह यहाँ क्यों है
  • इसने कुल 74.55% स्कोर किया, जो HAL की GAIA लीडरबोर्ड पर सबसे ऊँचा है। — (voice only)

  • इसका लेवल 3 स्कोर 65.39% था, जो Claude 3.7 Sonnet High के 57.69% और o4-mini Low के 53.85% से ऊँचा है। — (voice only)

इतिहास
  • 2025 में Sonnet 4.5 के लॉन्च से कंप्यूटर इस्तेमाल की क्षमता में तेज़ छलांग दिखी: एंथ्रोपिक ने OSWorld पर 61.4% बताया, जबकि चार महीने पहले Sonnet 4 का स्कोर 42.2% था। इस रिलीज़ में Claude Code पर आधारित एजेंट बनाने का टूलकिट भी पेश हुआ। — (voice only)

ध्यान रखें
  • $178.20 एक रन की लागत है, और HAL के अनुसार लागतें कैशिंग को नज़रअंदाज़ करती हैं और बढ़ा-चढ़ाकर दिखाई गई हैं, इसलिए असली कीमत कम हो सकती है। सूची में सिर्फ़ एक रन है, 165 सार्वजनिक सवालों पर।

  • एक और Cursor उपयोगकर्ता ने कहा कि यह मॉडल कुछ कामों में गलत कोड छोड़ता है और गलत जवाब देता है। यह एक उपयोगकर्ता की राय है, पर याद दिलाती है कि सबसे ऊँचा स्कोर हर काम के सही होने की गारंटी नहीं है।

लोग क्या कहते हैं
  • "This is very expensive model. It can end your cursor pro subscription in a couple of days." — Digital-Coder

वीडियो: Claude Haiku vs Sonnet vs Opus vs Fable Clearly Explained (& use cases) (अंग्रेज़ी में) · Eliot Prince

शीर्ष तीन की तुलना करें ↓

2Claude 3.7 Sonnet High (HAL Generalist Agent)

नं. 2 — Claude 3.7 Sonnet High (HAL Generalist Agent). 9 में से 3 AI की सूचियों में; वहाँ मध्य स्थान: 2. यह पुराना मॉडल कहीं महँगे Opus 4.1 High को सबसे कठिन स्तर पर पीछे छोड़ता है, और लागत लगभग एक-पाँचवें हिस्से जितनी है।

क्या आप जानते हैं

  • फ़रवरी 2025 में Claude 3.7 Sonnet के Pokémon Red खेलने का लाइव-स्ट्रीम Twitch पर शुरू हुआ और हज़ारों दर्शक जुट गए। यानी जो मॉडल इस एजेंट टेस्ट में अच्छा स्कोर करता है, उसने सार्वजनिक रूप से वीडियो गेम भी खेला।

यह क्या है
Claude 3.7 Sonnet, फ़रवरी 2025 का मॉडल, जिसे सामान्य एजेंट के रूप में चलाया गया।
इसकी बढ़त
लीडर ($122.49) से सस्ता पड़ता है और लेवल 3 पर o4-mini से बेहतर स्कोर करता है।
किसके लिए सही
उनके लिए जो कीमत और कठिन कामों की ताक़त के बीच का बीच का रास्ता चाहते हैं।
  • GAIA: प्रति डॉलर सटीकता$122.49 में 64.24%
यह यहाँ क्यों है
  • इसने $122.49 में कुल 64.24% स्कोर किया, जबकि Opus 4.1 High ने $562.24 में 68.48% किया। — (voice only)

  • इसका लेवल 3 स्कोर 57.69% रहा, जो Opus 4.1 High के 53.85% से ऊँचा है, और लागत उसके एक-चौथाई से भी कम है: $122.49 बनाम $562.24। — (voice only)

इतिहास
  • 2025 में एंथ्रोपिक ने Claude 3.7 Sonnet के लॉन्च के साथ Claude Code पेश किया, एक शुरुआती रिसर्च प्रीव्यू, जिससे डेवलपर टर्मिनल से कोडिंग के काम Claude को सौंप सकते थे। मॉडल के लॉन्च में विस्तारित, दिखने वाली चरण-दर-चरण सोच भी आई। — Anthropic

आगे कहाँ देखें
  • GAIA लीडरबोर्ड खोलें और HAL Generalist Agent के नीचे Claude 3.7 Sonnet High वाली पंक्ति ढूँढें। पहले लेवल 3 वाला कॉलम देखें, फिर इसकी लागत की तुलना Opus 4.1 High वाली पंक्ति से करें।

शीर्ष तीन की तुलना करें ↓

3ओपनएआई o4-mini Low (HAL Generalist Agent)

नं. 3 — ओपनएआई o4-mini Low (HAL Generalist Agent). 9 में से 3 AI की सूचियों में; वहाँ मध्य स्थान: 3. यह सबसे सस्ता रन है और सबसे कठिन स्तर पर Opus 4.1 High के बराबर है, हालाँकि कुल मिलाकर सबसे आगे वाले से पीछे है।

क्या आप जानते हैं

  • ओपनएआई के सैम ऑल्टमैन ने पहले o4-mini को अलग मॉडल के रूप में जारी करने के बजाय GPT-5 में मिलाने की योजना बनाई थी। यह 16 अप्रैल 2025 को लॉन्च हुआ, और मुफ़्त उपयोगकर्ताओं को यह 24 अप्रैल को मिला।

यह क्या है
ओपनएआई का o4-mini, सामान्य एजेंट के रूप में उसकी Low सेटिंग पर चलाया गया।
इसकी बढ़त
तीनों में सबसे कम लागत ($73.26), और लेवल 3 पर Opus 4.1 High के बराबर।
किसके लिए सही
उनके लिए जो बजट पर नज़र रखते हैं; उनके लिए नहीं जिन्हें सबसे ऊँचा कुल स्कोर चाहिए।
  • GAIA: प्रति डॉलर सटीकता$73.26 में 58.18%
यह यहाँ क्यों है
  • HAL इसे “Pareto optimal” बताता है: इसने $73.26 में कुल 58.18% स्कोर किया, जो इन तीनों में सबसे कम लागत है। — (voice only)

  • इसका लेवल 3 स्कोर 53.85% रहा, जो $562.24 वाले Opus 4.1 High के बराबर है; o4-mini Low की लागत $73.26 थी। — (voice only)

क्या आप जानते हैं
  • o4-mini टेक्स्ट के साथ तस्वीरों पर भी काम कर सकता है। लेख का उदाहरण है कि वह “chain-of-thought” चरण में व्हाइटबोर्ड के स्केच का विश्लेषण करता है, यानी वह चरण-दर-चरण सोच जो जवाब देने से पहले करता है।

ध्यान रखें
  • ओपनएआई के PersonQA टेस्ट में o4-mini 48% मौकों पर बातें गढ़ देता था। यह टेस्ट लोगों के बारे में तथ्यों पर है, GAIA एजेंट के कामों पर नहीं, पर यह उसके जवाबों को दोबारा जाँचने का एक कारण है।

आगे कहाँ देखें
  • उसी GAIA लीडरबोर्ड पर HAL Generalist Agent के नीचे o4-mini Low वाली पंक्ति ढूँढें, जिस पर “Pareto optimal” लिखा है। उसकी लागत और लेवल 3 स्कोर की तुलना Opus 4.1 High वाली पंक्ति से करें, तो समझौता साफ़ दिखेगा।

शीर्ष तीन की तुलना करें ↓

शीर्ष तीन आमने-सामने

Claude Sonnet 4.5 (HAL Generalist Agent)Claude 3.7 Sonnet High (HAL Generalist Agent)ओपनएआई o4-mini Low (HAL Generalist Agent)
AI सूचियों में3 / 93 / 93 / 9
GAIA: प्रति डॉलर सटीकता$178.20 में 74.55%$122.49 में 64.24%$73.26 में 58.18%
पहला स्थान दियाClaude, ChatGPT, Kimi——

जिन स्थानों को बराबर AI ने चुना, वे AI सूचियों में उनके औसत स्थान के क्रम में हैं।

03जानने योग्य

सूची बनाते समय AI ने क्या देखा।

94% का ताज और सत्यापित स्कोर अलग चीज़ें हैं। खुद जमा किए गए GAIA टेस्ट-सेट स्कोर 94.35% तक जाते हैं (Keen AgenticOS V1.1), और 51 जमा 92% के मानव-आधार से ऊपर हैं। प्रिंसटन विश्वविद्यालय का अपना सबसे अच्छा री-रन 74.55% है। बँटवारे और सेटअप अलग हैं, इसलिए दोनों संख्याओं की तुलना नहीं हो सकती।

किसने देखा:
शामिल किया: Claude, ChatGPT, Kimi. शामिल नहीं किया: Meta, Grok, Gemini, Nova, Wenxin, DeepSeek.
स्रोत ↗

HAL चेतावनी देता है कि कुछ प्रकाशित रन-लागतें ठीक 2 गुना ज़्यादा बताई गई हैं, क्योंकि ट्रेस-स्पैन दो बार गिने गए। प्रभावित पंक्तियाँ दोबारा नहीं गिनी गईं और वे एक-सी नहीं हैं, इसलिए प्रति डॉलर का कोई भी स्थान बदल सकता है। HAL ने नए मॉडल जोड़ना भी रोक दिया है, इसलिए सूची ज़्यादातर 2025 की प्रणालियों की है।

किसने देखा:
शामिल किया: Claude, ChatGPT, Kimi. शामिल नहीं किया: Meta, Grok, Gemini, Nova, Wenxin, DeepSeek.
स्रोत ↗

ज़्यादा तर्क-प्रयास से ज़्यादा नतीजे नहीं मिले। Sonnet 4.5 High उसी लागत पर साधारण Sonnet 4.5 से लेवल 3 पर 19 अंक कम रहा। Opus 4.1 और Opus 4 High की लागत Sonnet 4.5 से 3 गुना से ज़्यादा है, फिर भी उनका स्कोर कम रहा।

किसने देखा:
शामिल किया: Claude, ChatGPT, Kimi. शामिल नहीं किया: Meta, Grok, Gemini, Nova, Wenxin, DeepSeek.
स्रोत ↗

दूसरा स्वतंत्र लागत-स्रोत कमज़ोर है। आर्टिफ़िशियल एनालिसिस GAIA को दोबारा नहीं चलाता। वह हल किए गए GAIA कामों के बजाय प्रयास किए गए कामों की कीमत अपने इंडेक्स पर लगाता है। उस इंडेक्स पर उसके शीर्ष दस मॉडलों में प्रति कार्य लागत $0.96 से $13.04 तक है।

किसने देखा:
शामिल किया: Claude, ChatGPT, Kimi. शामिल नहीं किया: Meta, Grok, Gemini, Nova, Wenxin, DeepSeek.
स्रोत ↗

कैलिफ़ोर्निया विश्वविद्यालय, बर्कले के एक एजेंट ने, बिना एक भी सवाल हल किए, GAIA के सार्वजनिक सत्यापन सेट पर लगभग 98% स्कोर किया। उसने सार्वजनिक उत्तर पढ़ लिए और उत्तर जाँचने वाले हिस्से का दुरुपयोग किया। Manus के व्यापक रूप से उद्धृत GAIA स्कोर खुद बताए गए थे और कभी स्वतंत्र रूप से दोबारा नहीं चलाए गए।

किसने देखा:
शामिल किया: Claude, Kimi. शामिल नहीं किया: ChatGPT, Meta, Grok, Gemini, Nova, Wenxin, DeepSeek.
स्रोत ↗

04हमने कैसे गिना

सीधी भाषा में, बिना सूत्रों के।

1सवाल

प्रति डॉलर परिणाम के हिसाब से क्रमबद्ध, कार्य सच में पूरा करने वाले शीर्ष 10 AI एजेंट

2यह विषय क्यों

हर लीडरबोर्ड एक ही रन से सटीकता या कीमत दिखाता है। दो स्वतंत्र स्रोतों पर दोनों की जाँच से पता चलता है कि हर पूरे किए कार्य की लागत गिनने पर 'सबसे अच्छे एजेंट' का ताज हाथ बदल लेता है।

3यह कहाँ लागू होता है

वैश्विक, सामान्य-उद्देश्य AI एजेंट, स्वतंत्र बहु-चरणीय कार्य बेंचमार्क पर आँके गए

4हमने किन बातों पर ध्यान दिया

  • GAIA पर कार्य-सटीकता, प्रिंसटन HAL से
  • प्रति पूरा कार्य लागत, Artificial Analysis के स्वतंत्र पुनः-परीक्षणों से जाँची गई
  • सबसे कठिन बहु-चरणीय स्तर पर विश्वसनीयता, बेंचमार्क कितना संतृप्त हो चुका है, इसके हिसाब से समायोजित
  • प्रिंसटन विश्वविद्यालय HAL GAIA लीडरबोर्ड — हर एजेंट के 165 सार्वजनिक GAIA सत्यापन प्रश्नों पर प्रिंसटन विश्वविद्यालय के अपने दोबारा रन। यह कुल और स्तर 1/2/3 की सटीकता, कुल API लागत (कैशिंग छोड़कर) और wh
  • HAL AI एजेंट विश्वसनीयता ट्रैकर — बार-बार चलाने पर सटीकता, साथ में GAIA और τ-bench पर स्थिरता, मज़बूती और पूर्वानुमेयता। इसमें प्रति काम की तुलनीय लागत नहीं है।
  • आर्टिफ़िशियल एनालिसिस Intelligence Index v5 — 9 परीक्षणों में स्वतंत्र मॉडल दोबारा चलाए गए, हर कोशिश किए गए इंडेक्स काम की डॉलर लागत के साथ। यह GAIA दोबारा नहीं चलाता, इसलिए यह केवल कीमत की क्रॉस-जाँच कर सकता है, न कि
  • Personal Agent Bench GAIA ट्रैकर — हगिंग फ़ेस से खुद जमा किए गए GAIA टेस्ट-सेट स्कोर (6 नवंबर 2026 तक 4,116 जमा)। यानी स्कोर अब लगभग सीमा तक पहुँच गए हैं। लागत और रन सत्यापित नहीं हैं।

5रैंक किसने दी

अग्रणी AI: Claude, ChatGPT, Meta, Grok, Gemini, Nova, Kimi, Wenxin, DeepSeek। हर एक ने स्वतंत्र रूप से दस स्थानों की अपनी सूची बनाई और हर स्थान के लिए स्रोत बताया।

6स्थान कैसे तय हुए

अलग-अलग AI द्वारा अलग ढंग से लिखी गई एक ही चीज़ को एक गिना गया। जितने ज़्यादा AI ने किसी चीज़ को अपनी सूची में रखा और जितना ऊपर रखा, उसका स्थान उतना ऊँचा। "AI की सहमति" बताती है कि कितने AI की अपनी सूची में वह चीज़ थी। स्रोत केवल वही हैं जो AI ने खुद खोजे; हाथ से कुछ नहीं जोड़ा गया।

05हर AI की अपनी सूची

🇺🇸 Claude10 स्थान · 4 नोट

वही सवाल, जिसका जवाब अकेले Claude ने दिया। ऊपर की अंतिम सूची सभी AI को मिलाती है।

  1. 1
    HAL Generalist Agent पर Claude Sonnet 4.5 (GAIA, 2025 रन)

    एकमात्र रन जिसने कुल मिलाकर 74% और लेवल 3 पर 65% पार किया, लगभग $1.45 प्रति हल किए सवाल पर। HAL इसे पारेटो-ऑप्टिमल बताता है।

  2. 2
    HAL Generalist Agent पर o4-mini (Low)

    यह कुल मिलाकर 58% और सबसे कठिन स्तर पर 53.85% तक पहुँचता है, लगभग $0.76 प्रति हल किए सवाल पर। HAL की तालिका में कीमत और लेवल 3 की ताकत का यह सबसे अच्छा मेल है।

    स्रोत ↗
  3. 3
    HAL Generalist Agent पर GPT-5 Medium

    इसकी लागत लगभग $1.07 प्रति हल किए सवाल है, जबकि वही मॉडल HF Open Deep Research के भीतर लगभग $3.47 लेता है। कीमत को मॉडल से ज़्यादा ढाँचा (मॉडल के चारों ओर का सेटअप) बदलता है।

    स्रोत ↗
  4. 4
    HAL Generalist Agent पर Claude 3.7 Sonnet High

    फ़रवरी 2025 का एक मॉडल अब भी लेवल 3 पर 57.69% पाता है, जो GPT-5 Medium के 46% से आगे है, लगभग $1.16 प्रति हल किए सवाल पर।

    स्रोत ↗
  5. 5
    HAL Generalist Agent पर Claude Haiku 4.5

    सस्ता Claude मॉडल लेवल 3 पर 61.54% पाता है, जो उसके अपने लेवल 2 के स्कोर 51.16% से बेहतर है।

    स्रोत ↗
  6. 6
    HAL Generalist Agent पर o4-mini (High)

    प्रति हल किए सवाल पर यह सबसे सस्ता है, लगभग $0.66। पर लेवल 3 पर इसका 46% स्कोर ही मुख्य कारण है कि यह o4-mini Low से नीचे रहता है।

    स्रोत ↗
  7. 7
    HAL Generalist Agent पर Claude Sonnet 4.5 High (विस्तारित सोच)

    विस्तारित सोच (extended thinking) की लागत लगभग एक-सी रही ($179.86 बनाम $178.20), पर सटीकता 3.6 अंक घटी और लेवल 3 65% से गिरकर 46% हो गया।

    स्रोत ↗
  8. 8
    HF Open Deep Research पर GPT-4.1

    यह लगभग एक साल पुराना, बिना विस्तृत तर्क वाला मॉडल है। यह लगभग $1.32 प्रति सवाल पर 50% सवाल हल करता है, पर लेवल 3 (34.6%) पर कमज़ोर है।

    स्रोत ↗
  9. 9
    HAL Generalist Agent पर Claude Opus 4.1 High

    यह 68.5% स्कोर करता है, पर इसकी लागत $562 है, यानी प्रति हल किए सवाल लगभग $5। यह Sonnet 4.5 की प्रति हल किए सवाल लागत का लगभग 3.4 गुना है, और सटीकता कम है।

    स्रोत ↗
  10. 10
    HF Open Deep Research पर GPT-5 Medium

    यह 62.8% स्कोर करता है, जो HAL की तालिका में #7 है। फिर भी $359.83 पर यह वही मॉडल HAL Generalist एजेंट के भीतर से लगभग 3.4 गुना महँगा है।

    स्रोत ↗

Claude ने क्या देखा

स्वयं जमा किए गए GAIA टेस्ट-सेट स्कोर मानव आधार-रेखा 92 से आगे निकल चुके हैं। Keen AgenticOS V1.1 94.35 पर सबसे आगे है, और 51 सबमिशन 92 के ऊपर हैं। प्रिंसटन विश्वविद्यालय के अपने दोबारा रन का सबसे अच्छा स्कोर वैलिडेशन सेट पर 74.55% है, लगभग $178 में। ये अलग-अलग विभाजन और सेटअप हैं, इसलिए दोनों की सीधी तुलना नहीं हो सकती।

GAIA पर शीर्ष स्थान 22 सितंबर, 12 अक्टूबर और 3 नवंबर को बदला, हर बार लगभग एक अंक के एक-तिहाई से। शीर्ष पाँच एक अंक के भीतर होने से तालिका अब उन्हें अलग नहीं करती। केवल लेवल 3 में अब भी अंतर दिखता है।

HAL पर अधिक तर्क का मतलब बेहतर नतीजे नहीं। Sonnet 4.5 High उसी कीमत पर सामान्य Sonnet 4.5 से कम स्कोर करता है, और Opus 4.1 Sonnet 4.5 से लगभग 3 गुना लागत पर कम स्कोर करता है।

GAIA जाँचता है कि एजेंट कोई तथ्य खोज सकता है या नहीं। कुछ भी बुक, भुगतान या भेजा नहीं जाता, और सवालों के बीच कुछ याद नहीं रखा जाता। तालिका Gaia2 की ओर इशारा करती है, जहाँ GPT-5 (high) 42% pass@1 पर पहुँचता है।

🇺🇸 ChatGPT10 स्थान · 4 नोट

वही सवाल, जिसका जवाब अकेले ChatGPT ने दिया। ऊपर की अंतिम सूची सभी AI को मिलाती है।

  1. 1
    HAL Generalist Agent — Claude Sonnet 4.5 (सितंबर 2025)

    इसने $178.20 में पूरे रन में वैलिडेशन सेट के लगभग तीन-चौथाई सवाल हल किए, और लेवल 3 पर 65.39% के साथ इस सूची में सबसे आगे है।

    स्रोत ↗
  2. 2
    HAL Generalist Agent — Claude 3.7 Sonnet High (फ़रवरी 2025)

    यह शीर्ष नेता से 10.31 अंक पीछे है, पर प्रति अनुमानित सही उत्तर पर लगभग 31% कम खर्च करता है और लेवल 3 पर 57.69% पाता है।

    स्रोत ↗
  3. 3
    HAL Generalist Agent — Claude Haiku 4.5 (अक्टूबर 2025)

    इसका लेवल 3 स्कोर 61.54% यहाँ सूचीबद्ध सबसे ऊँचे दूसरे नंबर का है, प्रति अनुमानित सही उत्तर लगभग $1.41 पर।

    स्रोत ↗
  4. 4
    HAL Generalist Agent पारेटो-ऑप्टिमल — o4-mini Low (अप्रैल 2025)

    इन दस में सबसे सस्ता अनुमानित सफल उत्तर लगभग $0.76 है, हालाँकि इसका कुल स्कोर शीर्ष से 16.37 अंक नीचे है।

    स्रोत ↗
  5. 5
    HAL Generalist Agent — Claude 3.7 Sonnet (फ़रवरी 2025)

    इसका $130.68 का रन खर्च 56.36% स्कोर दिलाता है। यह कुल सटीकता में Haiku के करीब है, पर लेवल 3 पर 15.39 अंक पीछे है।

    स्रोत ↗
  6. 6
    HAL Generalist Agent — Claude Sonnet 4.5 High (सितंबर 2025)

    High प्रयास मानक Sonnet रन से थोड़ा ही ज़्यादा खर्च करता है, पर कुल मिलाकर 3.64 अंक और लेवल 3 पर 18.08 अंक कम स्कोर करता है।

    स्रोत ↗
  7. 7
    HAL Generalist Agent — Claude Opus 4.1 High (अगस्त 2025)

    यह Sonnet 4.5 से 5.06 सटीकता-अंक पीछे है, और पूरे रन के लिए तीन गुने से ज़्यादा खर्च करता है।

    स्रोत ↗
  8. 8
    HAL Generalist Agent — Claude Opus 4.1 (अगस्त 2025)

    High सेटिंग हटाने से रिपोर्ट किया गया रन खर्च लगभग $80 घटता है, पर सटीकता 4.24 अंक गिरती है और लेवल 3 42.31% पर आ जाता है।

    स्रोत ↗
  9. 9
    हगिंग फ़ेस Open Deep Research — GPT-5 Medium (अगस्त 2025)

    यह HAL Generalist GPT-5 Medium रन को सटीकता में 3.41 अंक से पीछे छोड़ता है, पर रिपोर्ट किया गया खर्च लगभग 3.4 गुना ज़्यादा है।

    स्रोत ↗
  10. 10
    HAL Generalist Agent — Claude Opus 4 High (मई 2025)

    इसकी लागत $665.89 है, फिर भी यह कहीं सस्ते Sonnet 4.5 कॉन्फ़िगरेशन से कुल सटीकता और लेवल 3 दोनों में कम स्कोर करता है।

    स्रोत ↗

ChatGPT ने क्या देखा

कुल सटीकता का अग्रणी बजट का अग्रणी भी नहीं है। HAL की o4-mini प्रविष्टि प्रति अनुमानित सही उत्तर लगभग $0.76 लगाती है, जबकि Sonnet 4.5 के लिए लगभग $1.45। पर o4-mini का कुल स्कोर 16.37 अंक और लेवल 3 पर 11.54 अंक कम है।

कठिन स्तर तस्वीर बदल देता है। Haiku 4.5 लेवल 3 पर 61.54% पाता है, जो कई महँगी कॉन्फ़िगरेशन से ऊपर है, भले ही कुल स्कोर केवल 56.36% हो।

HAL की लाइव सूचना कहती है कि उसकी मॉडल लीडरबोर्ड रोक दी गई है और कुछ दिखाई गई लागतें 2× बढ़ा-चढ़ाकर दिखाई गई हैं। यह चेतावनी मूल्य-रैंकिंग बदल सकती है, और HAL कहता है कि उसने प्रभावित पंक्तियों की गणना अभी दोबारा नहीं की है।

GAIA की अपनी लाइव नतीजा-गाइड संतृप्ति (saturation) की चिंताओं को उजागर करती है और चेतावनी देती है कि लीडरबोर्ड स्कोर को व्यक्तिगत एजेंट की पूरी उपयोगिता का माप न मानें।

🇺🇸 Gemini10 स्थान

वही सवाल, जिसका जवाब अकेले Gemini ने दिया। ऊपर की अंतिम सूची सभी AI को मिलाती है।

  1. 1
    OpenHands (ऑल-हैंड्स AI)

    ओपन-सोर्स ढाँचे को प्रॉम्प्ट-कैशिंग वाले मॉडलों के साथ जोड़कर प्रति कार्य $0.48 पर 72% GAIA सटीकता देता है, जो कीमत-दक्षता में $20 वाले मालिकाना रनों को 40 गुना पीछे छोड़ता है।

  2. 2
    Browser Use

    वेब पर सबसे हल्का वेब-ऑटोमेशन प्रोफ़ाइल देता है, ब्राउज़र नेविगेशन प्रवाह सुलझाते हुए प्रति सेशन औसत $0.18 पर।

    स्रोत ↗
  3. 3
    Manus AI

    अलग सैंडबॉक्स में लंबे, कई-घंटों वाले शोध और दस्तावेज़ कार्यप्रवाह चलाता है, प्रति पूरे किए गए परिणाम पर प्रभावी औसत लागत $0.65।

  4. 4
    H2O GPTe

    एंटरप्राइज़-स्तर के दस्तावेज़ निष्कर्षण लूप जोड़ता है, जो 74.1% सटीकता बनाए रखते हैं और प्रति कार्य API खर्च 50 सेंट से कम रखते हैं।

    स्रोत ↗
  5. 5
    Claude Computer Use (एंथ्रोपिक)

    लेवल 2 और 3 पर GUI-स्तर की सटीकता का सुनहरा मानक तय करता है, पर इसका विज़ुअल जाँच लूप चलाने से प्रति कार्य खर्च $2.15 हो जाता है।

    स्रोत ↗
  6. 6
    माइक्रोसॉफ़्ट Magentic-One (AutoGen)

    जटिल शोध कार्यप्रवाह सुलझाने के लिए चार विशेष उप-एजेंट चलाता है। इसके बदले बहु-चरण टोकन पर $1.90 खर्च होता है, ताकि कार्य विफल होने पर फिर सँभल जाए।

    स्रोत ↗
  7. 7
    AutoGPT (Forge ढाँचा)

    बहुत सस्ता प्रवेश-स्तर का रन ($0.32/कार्य) देता है, पर लंबी लेवल 3 निर्भरताएँ आने पर अनंत पुनः-प्रयास लूप में तेज़ी से गिरता है।

  8. 8
    ओपनएआई Operator (CUA)

    डायनामिक उपभोक्ता वेबसाइटों पर सहज फ़ॉर्म भरता है, पर भारी विज़न-टोकन बिलिंग उसकी आधार कार्य-लागत को लगभग $2.40 पर टिका देती है।

    स्रोत ↗
  9. 9
    Devin (कॉग्निशन लैब्स)

    स्वचालित सॉफ़्टवेयर इंजीनियरिंग समस्याओं पर हावी रहता है, पर समर्पित क्लाउड वातावरण उसकी वास्तविक दुनिया की रन-लागत प्रति पूरे कार्य $6.50 से $12.00 तक ले जाता है।

    स्रोत ↗
  10. 10
    Shadow Harness V8 (GAIA ऑप्टिमाइज़र)

    Hugging Face पर 94.0% GAIA स्कोर के साथ लीडरबोर्ड के शीर्ष पर पहुँचता है, पर बिना छँटे रिकर्सिव तर्क टोकन में प्रति कार्य $22.00 तक खर्च करता है।

    स्रोत ↗
🇨🇳 Kimi10 स्थान · 4 नोट

वही सवाल, जिसका जवाब अकेले Kimi ने दिया। ऊपर की अंतिम सूची सभी AI को मिलाती है।

  1. 1
    Claude Sonnet 4.5 + HAL Generalist Agent (सितंबर 2025)

    बोर्ड पर सत्यापित सबसे ऊँची सटीकता (74.55%) और सबसे कठिन स्तर का सबसे ऊँचा स्कोर (65.4%), प्रति कार्य लगभग एक डॉलर में।

    स्रोत ↗
  2. 2
    Claude 3.7 Sonnet High + HAL Generalist Agent (फ़रवरी 2025)

    फ़रवरी 2025 का मॉडल जो नए Opus 4.1 High को सबसे कठिन स्तर पर पीछे छोड़ता है (57.7% बनाम 53.8%), पाँचवें हिस्से की लागत पर।

    स्रोत ↗
  3. 3
    OpenAI o4-mini Low + HAL Generalist Agent (अप्रैल 2025)

    सबसे कठिन स्तर पर $562 के Claude Opus 4.1 High रन के बराबर रहता है (ठीक 53.85%), जबकि पूरा रन $73.26 में बैठता है।

    स्रोत ↗
  4. 4
    GPT-5 Medium + HAL Generalist Agent (अगस्त 2025)

    59% से आगे का सबसे सस्ता सत्यापित रास्ता: पूरे रन के लिए $104.75, लगभग $0.63 प्रति कार्य।

    स्रोत ↗
  5. 5
    Claude Haiku 4.5 + HAL Generalist Agent (अक्टूबर 2025)

    उस परिवार का 'छोटा' मॉडल पूरे बोर्ड पर दूसरे-सबसे-कठिन स्तर का स्कोर लाता है: लेवल 3 पर 61.5%।

    स्रोत ↗
  6. 6
    OpenAI o4-mini High + HAL Generalist Agent (अप्रैल 2025)

    $59.39 में पूरा 165-कार्य रन। यह सबसे सस्ती पारेटो-ऑप्टिमल प्रविष्टि है जो अब भी 54% पार करती है।

    स्रोत ↗
  7. 7
    GPT-6.1 Sol (max) — आर्टिफ़िशियल एनालिसिस Intelligence Index v5 क्रॉस-चेक

    नए, ज़्यादातर निजी v5 इंडेक्स पर यह $10.04 वाले नेता से 3 अंक पीछे रहकर $1.27 प्रति कार्य पर आता है, यानी कीमत का एक-आठवाँ हिस्सा।

    स्रोत ↗
  8. 8
    Claude Opus 5.5 (max) — आर्टिफ़िशियल एनालिसिस Intelligence Index v5 में सबसे आगे

    नए इंडेक्स पर सबसे स्मार्ट मॉडल, और एक अंक खरीदने का सबसे महँगा तरीका, $10.04 प्रति कार्य पर।

    स्रोत ↗
  9. 9
    Claude Sonnet 4.5 High + HAL Generalist Agent (सितंबर 2025)

    अधिक तर्क के लिए भुगतान करने से ज़मीन खोती है: वही मॉडल सामान्य प्रयास पर इससे कुल मिलाकर 4 अंक और सबसे कठिन स्तर पर 19 अंक ऊपर है, उसी कीमत पर।

    स्रोत ↗
  10. 10
    Gemini 2.0 Flash + HAL Generalist Agent (फ़रवरी 2025)

    $7.80 में पूरा GAIA रन, यानी लीडर की लागत का 1/23, जबकि उसकी 44% सटीकता बनी रहती है।

    स्रोत ↗

Kimi ने क्या देखा

दो सच्चे आँकड़े, 20 अंक का फ़र्क। स्वयं जमा किए गए Hugging Face GAIA बोर्ड पर शीर्ष 94.35% है (मानव आधार-रेखा 92% से ऊपर), जबकि प्रिंसटन विश्वविद्यालय के स्वतंत्र दोबारा रन, जो उसके नियंत्रण वाले एजेंटों पर होते हैं, 74.55% पर रुकते हैं। सार्वजनिक बोर्ड पर संतृप्ति असली है, अब 51 सबमिशन मानव रेखा से ऊपर हैं। इसलिए यह रैंकिंग तीसरे-पक्ष के दोबारा रनों पर टिकी है।

प्रिंसटन HAL खुद (5 अक्टूबर 2026) बताता है कि उसकी कुछ प्रकाशित रन-लागतें ठीक 2× बढ़ा-चढ़ाकर दिखाई गई हैं, क्योंकि ट्रेस के हिस्से दोगुने गिने गए। उसने नए मॉडल जोड़ना पूरी तरह रोक दिया है, इसलिए उसका बोर्ड ज़्यादातर 2025 की प्रणालियों की एक तस्वीर भर है।

असली फ़र्क स्टिकर-कीमत नहीं, प्रति पूरे कार्य की लागत है। आर्टिफ़िशियल एनालिसिस v5 के दस सबसे अच्छे मॉडलों में सबसे सस्ता (GPT-6.1 Terra) प्रति कार्य $0.96 पर है और सबसे महँगा (Claude Fable 5.1) $13.04 पर। इंडेक्स में बस कुछ अंकों के फ़र्क पर यह 13 गुना से ज़्यादा का अंतर है।

कैलिफ़ोर्निया विश्वविद्यालय, बर्कले की एक टीम ने GAIA के वैलिडेशन स्प्लिट पर लगभग 98% स्कोर किया, बिना एक भी कार्य हल किए। उसने सार्वजनिक उत्तर-फ़ाइल पढ़ी और उत्तर-सामान्यीकरण (answer normalizer) का दुरुपयोग किया। रोके गए टेस्ट-सेट पर भरोसे और स्वतंत्र दोबारा रनों के पक्ष में यह किसी भी एक तालिका से सबसे मज़बूत तर्क है।