اکتوبر کے آخر میں لائیو بینچ (ریاضی) پر کونسی کمپنی کے پاس بہترین AI ماڈل ہے؟

یہ مارکیٹ اس کمپنی کے مطابق حل کرے گی جو LiveBench.ai پر سب سے زیادہ ریاضی کے اسکور کے ساتھ ماڈل کی مالک ہے جب لیڈر بورڈ کو 31 اکتوبر 2026 کو، 12:00 PM ET پر چیک کیا جائے گا۔

https://livebench.ai/#/?cats=Mathematics پر لیڈر بورڈ کے "ریاضی" کالم کے نتائج، تازہ ترین دستیاب LiveBench ریلیز کے ساتھ منتخب کردہ اور زمرہ "ریاضی" پر سیٹ اس مارکیٹ کو حل کرنے کے لیے استعمال کیا جائے گا۔

ماڈلز کی درجہ بندی مخصوص سکور کے مطابق کی جائے گی، جس میں اعلیٰ سکور کم سکور سے آگے ہوں گے۔ اگر دو یا دو سے زیادہ ماڈلز کا سکور بالکل وہی ہے جیسا کہ لیڈر بورڈ پر دکھایا گیا ہے، تو نچلے درج کردہ "کاسٹ فی کامیاب ٹاسک" والے ماڈل کو آگے درجہ دیا جائے گا۔ اگر ٹائی اب بھی باقی رہتی ہے تو، اس مارکیٹ گروپ میں درج کمپنی کے ناموں کی حروف تہجی کی ترتیب کو حتمی ٹائی بریکر کے طور پر استعمال کیا جائے گا (مثال کے طور پر، اگر دونوں ماڈلز درست سکور اور لاگت فی کامیاب کام کے حساب سے جوڑے جائیں تو، "Google" کو "SpaceXAI" سے آگے درجہ دیا جائے گا)۔ یہ مارکیٹ اس کمپنی کی بنیاد پر حل کرے گی جو اس درجہ بندی کے تحت پہلے نمبر پر ہے۔

اس مارکیٹ کے لیے حل کا ذریعہ LiveBench لیڈر بورڈ ہے۔ اگر یہ ریزولیوشن سورس چیک کے وقت دستیاب نہیں ہے، تو یہ مارکیٹ اس وقت تک کھلی رہے گی جب تک کہ لیڈر بورڈ آن لائن واپس نہ آجائے اور دستیاب ہونے کے بعد پہلی چیک کی بنیاد پر حل ہوجائے گا۔ اگر یہ مستقل طور پر دستیاب نہیں ہو جاتا ہے، تو یہ مارکیٹ "دوسرے" کو حل کر لے گی۔