نومبر کے آخر میں لائیو بینچ (کوڈنگ) پر کونسی کمپنی کے پاس بہترین AI ماڈل ہے؟

یہ مارکیٹ اس کمپنی کے مطابق حل کرے گی جو LiveBench.ai پر سب سے زیادہ کوڈنگ اسکور کے ساتھ ماڈل کی مالک ہے جب لیڈر بورڈ کو 30 نومبر 2026 کو، 12:00 PM ET پر چیک کیا جائے گا۔

https://livebench.ai/#/?cats=Coding پر لیڈر بورڈ کے "کوڈنگ" کالم کے نتائج، تازہ ترین دستیاب LiveBench ریلیز کے ساتھ منتخب کردہ اور زمرہ "کوڈنگ" کے لیے سیٹ کیا گیا ہے، اس مارکیٹ کو حل کرنے کے لیے استعمال کیا جائے گا۔

ماڈلز کی درجہ بندی مخصوص سکور کے مطابق کی جائے گی، جس میں اعلیٰ سکور کم سکور سے آگے ہوں گے۔ اگر دو یا دو سے زیادہ ماڈلز کا سکور بالکل وہی ہے جیسا کہ لیڈر بورڈ پر دکھایا گیا ہے، تو نچلے درج کردہ "کاسٹ فی کامیاب ٹاسک" والے ماڈل کو آگے درجہ دیا جائے گا۔ اگر ٹائی اب بھی باقی رہتی ہے تو، اس مارکیٹ گروپ میں درج کمپنی کے ناموں کی حروف تہجی کی ترتیب کو حتمی ٹائی بریکر کے طور پر استعمال کیا جائے گا (مثال کے طور پر، اگر دونوں ماڈلز درست سکور اور لاگت فی کامیاب کام کے حساب سے جوڑے جائیں تو، "Google" کو "SpaceXAI" سے آگے درجہ دیا جائے گا)۔ یہ مارکیٹ اس کمپنی کی بنیاد پر حل کرے گی جو اس درجہ بندی کے تحت پہلے نمبر پر ہے۔

اس مارکیٹ کے لیے حل کا ذریعہ LiveBench لیڈر بورڈ ہے۔ اگر یہ ریزولیوشن سورس چیک کے وقت دستیاب نہیں ہے، تو یہ مارکیٹ اس وقت تک کھلی رہے گی جب تک کہ لیڈر بورڈ آن لائن واپس نہ آجائے اور دستیاب ہونے کے بعد پہلی چیک کی بنیاد پر حل ہوجائے گا۔ اگر یہ مستقل طور پر دستیاب نہیں ہو جاتا ہے، تو یہ مارکیٹ "دوسرے" کو حل کر لے گی۔