Наступна модель байки (5.2+): останній іспитовий дебют людства?

Цей ринок буде вирішено «Так», якщо наступна модель Anthropic Claude Fable (5.2+), додана до результатів останнього іспиту Humanity на https://agi.safe.ai/, матиме точність HLE принаймні вказаний відсоток на 12:00 за східним часом у календарну дату, наступну за датою, коли вона вперше з’явилася на сайті. В іншому випадку цей ринок вирішить «Ні».

Відповідна модель повинна мати ім’я або ідентифікатор моделі, що включає «Fable» і бути позначеною як версія 5.2 або новіша, незалежно від використання великих літер або оточуючих префіксів, суфіксів, дат або дескрипторів. Наприклад, версія 5.2 або новіша, названа так само, як Claude Fable 5 або Claude Fable 5.1, буде кваліфікована, включаючи нове покоління цілих чисел, наприклад Claude Fable 6, тоді як моделі, назва яких не містить «Fable» або які зберігають позначення версії нижче 5.2, такі як Claude Fable 5.1 або Claude Mythos 5.1, не будуть відповідати вимогам. кваліфікуватися.

Відсоток, який відображається як «HLE Accuracy» для моделі в її картці результатів на діаграмі «Прогрес ШІ в останньому іспиті людства» на https://agi.safe.ai/ буде використовуватися для вирішення цього ринку. Цей ринок вирішуватиметься виключно на основі відображеної точності HLE, незалежно від помилки калібрування моделі, положення на діаграмі, інших балів конфігурації чи будь-яких базових детальних чи неокруглених даних, представлених в іншому місці.

Якщо до результатів останнього іспиту Humanity на ту саму календарну дату (ET) додано декілька кваліфікованих моделей, для вирішення буде використано модель з найвищою точністю HLE. Моделі, додані до результатів у календарну дату, наступну за першою появою початкової кваліфікаційної моделі, не розглядатимуться. Якщо модель спочатку додано до результатів Останнього іспиту Humanity, але згодом видалено та не додано повторно, так що вона не відображається на сайті о 12:00 за східним часом у календарну дату, наступну за першою появою, її вигляд не вважатиметься доданим до результатів Останнього іспиту Humanity.

Кваліфікаційну модель потрібно додати до результатів останнього іспиту Humanity на сторінці https://agi.safe.ai/. Для цього ринку не має значення те, чи була модель раніше випущена, загальнодоступна, бета-версія чи іншим чином доступна до появи на сайті.

Джерелом вирішення для цього ринку є офіційний веб-сайт Humanity's Last Exam за адресою https://agi.safe.ai/. Якщо це джерело дозволу недоступне о 12:00 за східним часом у календарну дату, наступну за датою, коли кваліфікована модель вперше з’явилася на сайті, цей ринок буде вирішено на основі першого наступного випадку, коли точність HLE моделі стане доступною на сайті. Якщо він залишиться недоступним до кінця сьомого дня після того, як кваліфікована модель уперше з’явиться на сайті, або якщо жодна кваліфікована модель не буде додана до 30 червня 2027 року, 23:59 за східним часом, цей ринок вирішить «Ні».