Статті › Надмірна впевненість і калібрування
Надмірна впевненість: наскільки чесна ринкова ціна
Ціна закриття ринку: коли вона показує «70%», команда насправді перемагає у 76,9% випадків; коли «30%» — у 34,6%. Ми перевірили 1,2 мільйона спостережень: ціни закриття рідко помиляються більш ніж на 1–3 відсоткові пункти. Це орієнтир для кожного, хто вважає себе точнішим за ринок: щоб перевершити ціну, потрібно стабільно відхилятися від неї не більш ніж на ці 3 в.п.
Що таке надмірна впевненість
Це схильність бути впевненішим, ніж дозволяє реальна точність. Людина каже: «я впевнений на 80%», а має рацію у 65% випадків. Це не дурість: упевненість зростає швидше за результат. Що більше подробиць про матч ви знаєте, то переконливішою здається власна версія, хоча точної інформації для прогнозу від цього не більшає.
Перевірити себе можна лише одним способом: записувати оцінку до матчу й порівнювати її з результатом після ста чи більше прогнозів.
Який вигляд має відкалібрована оцінка
Калібрування означає: серед подій, яким ви дали ймовірність 70%, близько 70% справджуються. Саме так ми перевірили ринок ставок 1X2. За ціною закриття без маржі букмекера ми розподілили 1 217 830 спостережень («команда в матчі») на групи за ймовірністю.
| Оцінка ринку | Спостережень | Очікувалося | Сталося | Різниця, в.п. |
|---|---|---|---|---|
| 0–10% | 51 288 | 6,6% | 5,6% | −1,1 |
| 10–20% | 155 782 | 15,6% | 14,5% | −1,1 |
| 20–30% | 247 929 | 25,2% | 24,4% | −0,9 |
| 30–40% | 265 664 | 34,9% | 34,6% | −0,3 |
| 40–50% | 211 189 | 44,7% | 45,1% | +0,4 |
| 50–60% | 139 357 | 54,7% | 55,9% | +1,2 |
| 60–70% | 79 947 | 64,5% | 66,8% | +2,2 |
| 70–80% | 43 183 | 74,3% | 76,9% | +2,6 |
| 80–90% | 19 391 | 84,5% | 86,9% | +2,4 |
| 90–100% | 4 100 | 91,9% | 95,0% | +3,1 |
Ринок дуже добре відкалібрований: максимальна похибка — 3 в.п., і вона систематична (аутсайдери перемагають трохи рідше за ціну, фаворити — трохи частіше; це відоме відхилення). Будь-яка оцінка того, «у чому ринок помиляється», має відрізнятися від ринку в межах цієї точності. Якщо ви кажете «ринок дає 50%, а насправді 65%», для цього потрібне дуже переконливе пояснення: на вибірці у сотні тисяч матчів ринок так не помиляється.
Як перевірити власне калібрування
- Записуйте ймовірність до матчу. Лише число, без слів («60%»).
- Зробіть щонайменше 100 прогнозів. За десятьма висновків не зробити.
- Розподіліть прогнози на групи з кроком 10%. Порахуйте, скільки прогнозів у кожній групі справдилося.
- Порівняйте з власними числами. Якщо в групі «70–80%» справджується 60%, ви систематично переоцінюєте себе.
- Порівняйте з ринком. Чи точніші ваші оцінки за ціни закриття на тих самих матчах? Якщо ні, ринок точніший за вас.
Приклад розрахунку (вигадані числа для ілюстрації): ви зробили 40 прогнозів «70–80%». Із них справдилися 26, тобто 65%. Ви очікували близько 75%; похибка — −10 в.п. Спершу потрібно розібратися з цим розривом, і лише потім робити ставки.
Звідки береться «експерт»
Експерту легко показати три вдалі прогнози з п’яти, а про два невдалі забути. Публікація успішних прогнозів і замовчування невдалих створюють враження точності, якої немає на довгій серії. Простий спосіб захисту: просити в будь-якого «експерта» не «серію вдалих прогнозів», а загальну статистику з датами й цінами.
Чого ми не знаємо
- Ціни закриття, а не відкриття. Ціна закриття точніша, бо до того часу надходить більше інформації.
- Лише 1X2. Тотали та інші ринки ми не перевіряли.
- Наскільки помиляється пересічна людина. У нас немає власної вибірки людських прогнозів, тому ми не наводимо цифр про «середню впевненість».
Що з цим робити
- Ведіть журнал прогнозів із ймовірностями. Без нього ви дізнаєтеся про себе лише те, що підкаже пам’ять.
- Звіряйтеся з ціною. Відхилення понад 3 в.п. потребує пояснення.
- Не плутайте кількість деталей із точністю. Знання складу й історії зустрічей не дорівнює ймовірності.
- Просіть статистику, а не історії. Окреме «я вгадав» без загальної вибірки нічого не доводить.
Поширені запитання
Що таке калібрування прогнозів? Відповідність між вашою впевненістю та частотою подій: із подій, яким ви дали «70%», справджується близько 70%.
Наскільки точна ринкова ціна? За нашими даними для 1X2 ціна закриття помиляється не більш ніж на 1–3 в.п. на всіх рівнях імовірності.
Чи можна бути точнішим за ринок? В окремих нішах це можливо, але потрібна вимірювана різниця з ціною та сотні прогнозів, які її підтверджують.
Скільки прогнозів потрібно, щоб оцінити себе? Щонайменше сотня, а краще кілька сотень: за десятьма прогнозами оцінка ненадійна.
Чому фаворити перемагають частіше, ніж вказує ціна? Це відоме відхилення ринку: аутсайдерів переоцінюють через інтерес до «сенсації». Ми бачимо це і в наших даних: +2–3 в.п. для фаворитів.
Читайте також
- Ціна закриття: чому її не обіграти ні «стімерами», ні моделлю
- Удача чи майстерність: що насправді визначає результат футбольного матчу
- Серія з п’яти перемог: «схоже на фаворита» — це вже враховано в ціні?
- Модель Діксона — Кольза простими словами: як розраховують імовірність рахунку
Ніщо на цьому сайті не є гарантією прибутку.
Порівняйте власну оцінку з ціною у калькуляторі EV: введіть імовірність і коефіцієнт та подивіться, чого очікує ринок.