لائیو بینچ (مجموعی طور پر) اکتوبر کے آخر میں کس کمپنی کے پاس بہترین AI ماڈل ہے؟

یہ مارکیٹ اس کمپنی کے مطابق حل کرے گی جو LiveBench.ai پر سب سے زیادہ مجموعی اسکور کے ساتھ ماڈل کی مالک ہے جب لیڈر بورڈ کو 31 اکتوبر 2026 کو، 12:00 PM ET پر چیک کیا جائے گا۔

https://livebench.ai/ پر لیڈر بورڈ کے "مجموعی طور پر" کالم کے نتائج، جس میں تازہ ترین دستیاب LiveBench ریلیز کا انتخاب کیا گیا ہے اور زمرہ "سب" پر سیٹ کیا گیا ہے، اس مارکیٹ کو حل کرنے کے لیے استعمال کیا جائے گا۔

ماڈلز کی درجہ بندی مخصوص سکور کے مطابق کی جائے گی، جس میں اعلیٰ سکور کم سکور سے آگے ہوں گے۔ اگر دو یا دو سے زیادہ ماڈلز کا سکور بالکل وہی ہے جیسا کہ لیڈر بورڈ پر دکھایا گیا ہے، تو نچلے درج کردہ "کاسٹ فی کامیاب ٹاسک" والے ماڈل کو آگے درجہ دیا جائے گا۔ اگر ٹائی اب بھی باقی رہتی ہے تو، اس مارکیٹ گروپ میں درج کمپنی کے ناموں کی حروف تہجی کی ترتیب کو حتمی ٹائی بریکر کے طور پر استعمال کیا جائے گا (مثال کے طور پر، اگر دونوں ماڈلز درست سکور اور لاگت فی کامیاب کام کے حساب سے جوڑے جائیں تو، "Google" کو "SpaceXAI" سے آگے درجہ دیا جائے گا)۔ یہ مارکیٹ اس کمپنی کی بنیاد پر حل کرے گی جو اس درجہ بندی کے تحت پہلے نمبر پر ہے۔

اس مارکیٹ کے لیے حل کا ذریعہ LiveBench لیڈر بورڈ ہے۔ اگر یہ ریزولیوشن سورس چیک کے وقت دستیاب نہیں ہے، تو یہ مارکیٹ اس وقت تک کھلی رہے گی جب تک کہ لیڈر بورڈ آن لائن واپس نہ آجائے اور دستیاب ہونے کے بعد پہلی چیک کی بنیاد پر حل ہوجائے گا۔ اگر یہ مستقل طور پر دستیاب نہیں ہو جاتا ہے، تو یہ مارکیٹ "دوسرے" کو حل کر لے گی۔