Как се оценяват прогнозите?
Всичко е прозрачно. Ето как работи оценяването.
🎯 Brier Score — колко точна е прогнозата
Brier Score е стандартна научна метрика, използвана от метеоролози, разузнавателни общности и академични изследователи. Измерва разликата между прогнозата ти и реалния резултат.
Brier Score = (прогноза − резултат)²
Пример: Прогнозираш 80% вероятност за събитие, което се случва.
Score = (0.80 − 1.00)² = 0.04 ✅ Отлично!
Пример: Прогнозираш 80% вероятност за събитие, което НЕ се случва.
Score = (0.80 − 0.00)² = 0.64 ❌ Лошо.
⚖️ Калибрация — вероятностите ти реалистични ли са?
Калибрацията показва дали вероятностите, които задаваш, съответстват на реалността.
Ако от 10 прогнози, на които си дал 70%, точно 7 се случат — ти си перфектно калибриран.
Ако казваш 90% на всичко, а се случва само половината — калибрацията ти е лоша.
📈 Репутация — цялостната ти оценка
Репутацията комбинира Brier Score и калибрация, като отчита и броя на приключилите прогнози. Колкото повече качествени прогнози имаш, толкова по-точна е оценката.
Важно
- ✅ Репутацията се изгражда само с качествени прогнози, не с количество.
- ✅ Можеш да променяш прогнозата си до крайния срок — оценява се последната.
- ✅ Нужни са поне 5 приключили прогнози, за да се появиш в класацията.
- ✅ Всичко е публично — прогнозите ти, резултатите, историята.