Статьи › Чрезмерная уверенность и калибровка
Чрезмерная уверенность: насколько цена рынка честна
Закрывающая цена рынка: когда она говорит «70%», команда на деле выигрывает в 76,9% случаев; когда «30%», в 34,6%. Мы проверили 1,2 миллиона наблюдений: цены закрытия редко ошибаются больше чем на 1–3 процентных пункта. Это ориентир для любого, кто считает себя точнее рынка: чтобы быть лучше цены, нужно отличаться от неё не больше чем на эти 3 п.п. и делать это стабильно.
Что такое чрезмерная уверенность
Это склонность быть увереннее, чем позволяет реальная точность. Человек говорит «я уверен на 80%», а прав в 65% случаев. Это не глупость: уверенность растёт быстрее, чем результат. Чем больше деталей знаешь о матче, тем убедительнее выглядит собственная версия, хотя информации для точного прогноза от этого не больше.
Проверить себя можно только одним способом: записывать оценку до матча и сравнивать с исходом через сто и более прогнозов.
Как выглядит откалиброванная оценка
Калибровка значит: из событий, которым вы дали 70%, происходит около 70%. Рынок ставок на 1X2 мы проверили именно так. По цене закрытия без маржи конторы мы разбили 1 217 830 наблюдений («команда в матче») на корзины по вероятности.
| Рынок давал | Наблюдений | Ожидалось | Произошло | Разница, п.п. |
|---|---|---|---|---|
| 0–10% | 51 288 | 6,6% | 5,6% | −1,1 |
| 10–20% | 155 782 | 15,6% | 14,5% | −1,1 |
| 20–30% | 247 929 | 25,2% | 24,4% | −0,9 |
| 30–40% | 265 664 | 34,9% | 34,6% | −0,3 |
| 40–50% | 211 189 | 44,7% | 45,1% | +0,4 |
| 50–60% | 139 357 | 54,7% | 55,9% | +1,2 |
| 60–70% | 79 947 | 64,5% | 66,8% | +2,2 |
| 70–80% | 43 183 | 74,3% | 76,9% | +2,6 |
| 80–90% | 19 391 | 84,5% | 86,9% | +2,4 |
| 90–100% | 4 100 | 91,9% | 95,0% | +3,1 |
Рынок откалиброван очень хорошо: максимальная ошибка 3 п.п., и она систематическая (аутсайдеры выигрывают чуть реже цены, фавориты чуть чаще, это известный перекос). Любая оценка «в чём рынок ошибается» должна отличаться от рынка в пределах этой точности. Если вы говорите «рынок даёт 50%, а на деле 65%», вам нужно очень убедительное объяснение, потому что на выборке в сотни тысяч рынок так не ошибается.
Как проверить свою калибровку
- Записывайте вероятность до матча. Только число, без слов («60%»).
- Набирайте не меньше 100 прогнозов. На десяти никакого вывода не сделать.
- Разбейте на корзины по 10%. Посчитайте, сколько в каждой корзине сбылось.
- Сравните со своими числами. Если в корзине «70–80%» сбывается 60%, вы систематически переоцениваете себя.
- Сравните с рынком. Лучше ли вы цены закрытия по тем же матчам? Если нет, рынок точнее вас.
Пример расчёта (выдуманные числа для иллюстрации): вы дали 40 прогнозов «70–80%». Из них сбылось 26, то есть 65%. Вы ожидали около 75%, ошибка −10 п.п. Этот разрыв нужно сначала понять, а уже потом ставить.
Откуда берётся «эксперт»
Эксперту легко показать три удачных прогноза из пяти, а проваленные два забываются. Публикация сбывшихся и молчание о несбывшихся создаёт ощущение точности, которого нет на длинной серии. Простой способ защиты: просить у любого «эксперта» не «серию успешных», а общую статистику с датами и ценами.
Чего мы не знаем
- Цены закрытия, не открытия. Закрытие точнее, потому что к нему приходит больше информации.
- Только 1X2. Тоталы и другие рынки не проверяли.
- Сколько в среднем ошибается человек. У нас нет собственной выборки прогнозов людей, поэтому цифр про «среднюю уверенность» не даём.
Что с этим делать
- Ведите журнал прогнозов с вероятностями. Без него вы узнаете о себе только то, что подскажет память.
- Сверяйтесь с ценой. Отклонение больше 3 п.п. требует объяснения.
- Не путайте количество деталей и точность. Знание состава и истории встреч не равно вероятности.
- Просите статистику, а не истории. Любое «я угадал» без общей выборки ничего не доказывает.
Частые вопросы
Что такое калибровка прогнозов? Совпадение вашей уверенности с частотой событий: из событий «70%» сбывается около 70%.
Насколько цена рынка точна? По нашим данным на 1X2 цена закрытия ошибается не больше чем на 1–3 п.п. на всех уровнях вероятности.
Можно ли быть точнее рынка? В отдельных нишах возможно, но для этого нужна измеримая разница от цены и сотни прогнозов, которые это подтверждают.
Сколько прогнозов нужно, чтобы оценить себя? Не меньше сотни, а лучше несколько сотен: по десяти оценка ненадёжна.
Почему фавориты выигрывают чаще цены? Это известный перекос рынка: аутсайдеров переоценивают из-за интереса к «сенсации». Мы видим его и у себя: +2–3 п.п. для фаворитов.
Читайте также
- Закрывающая линия: почему её не обыграть ни «стимерами», ни моделью
- Удача или мастерство: что на самом деле решает исход футбольного матча
- Серия из пяти побед: «выглядит как фаворит» — это уже в цене?
- Модель Диксона-Коулза простыми словами: как считают вероятность счёта
Ничто на этом сайте не является гарантией прибыли.
Сравните свою оценку с ценой в калькуляторе EV: введите вероятность и коэффициент и посмотрите, чего ждёт рынок.