Як обчислюється точність
Часова оцінка Brier, порівняння зі спільнотою та покриття події.
Plura оцінює не одну фінальну відповідь, а всю історію вашої ймовірності. Значення діє від моменту надсилання до наступного оновлення або завершення події.
Три складові
- Калібрування. Наскільки вказана ймовірність узгоджується з фактичним результатом.
- Час. Скільки тривало кожне значення.
- Відносна користь. Чи були ви точнішими за консенсус спільноти того ж часу.
Чому ранній прогноз важливий
Прогноз, надісланий у першій половині події, може впливати на більшу частину оцінки. Правильне значення за хвилину до завершення покриває лише цю останню хвилину й не прирівнюється до ранньої точної оцінки.
До вашого першого прогнозу система не вигадує для вас число: відносний внесок за цей час дорівнює нулю. Частка часу з власним прогнозом називається покриттям.
Формула для тих, хто хоче подробиці
Для результату y, що дорівнює 0 або 1, втрата Brier для ймовірності p:
B(p, y) = (p - y)²Втрати вашого прогнозу й історичного орієнтира інтегруються за часом. Підсумок події:
бали = 100 × (втрата орієнтира − ваша втрата)Додатне значення означає, що ваші ймовірності були кориснішими за орієнтир; від’ємне — слабшими. Політика розрахунку зберігається разом із результатом.
Приклад
Олена вказала 65% на початку й підняла оцінку до 80% після надійного звіту. Максим надіслав 90% лише перед завершенням. Якщо результат — «ТАК», обидва були на правильному боці, але Олена мала значно більше часове покриття.
Скасовані події не отримують оцінки та не впливають на рейтинг.