Каждый прогноз публиковался до начала матча и закрывался по факту. Мы взяли весь архив — выигранные и проигранные вперемешку — и проверили главное: значит ли что-нибудь наша уверенность. Ниже — что выдержало проверку, где наша слабая зона, и почему мы пока не показываем ROI.
207 закрытых прогнозов — это те, у которых уже известен результат матча. Два бота: футбольный (полигон на матчах сборных, 108 пиков) и хоккейный по КХЛ (99 пиков). Прогноз фиксируется в момент публикации и не редактируется. Каждая цифра ниже дана с 95% доверительным интервалом — диапазоном, в котором лежит истинное значение. Чем шире интервал, тем меньше данных и тем осторожнее нужно верить.
| Сегмент | Зашло | Винрейт | 95% интервал | Оценка |
|---|---|---|---|---|
| Оба бота, весь трек | 140/207 | 67.6% | 61.0 – 73.6% | солидно |
| Футбол, весь трек | 79/108 | 73.1% | 64.1 – 80.6% | солидно |
| Хоккей КХЛ, весь трек | 61/99 | 61.6% | 51.8 – 70.6% | солидно |
Любой может написать «уверенность 95%». Проверяется это одним способом: сгруппировать прогнозы по заявленной уверенности и посмотреть, какая доля реально зашла. Если шкала честная — линия факта растёт вместе с уверенностью. У нас растёт. Это то, что нельзя нарисовать задним числом.
Линия растёт слева направо — чем выше уверенность, тем чаще прогноз заходит. Но на 108 матчах каждая отдельная корзина имеет широкую погрешность (тонкие штрихи). Мы показываем это прямо, а не прячем: направление ясное, точность копится с каждым сезоном.
Верхняя корзина заявляет в среднем 94, фактически заходит 89.7% — модель слегка себя переоценивает. Провал на 70–74 (61.5%) реальный, это наша известная слабая зона.
Поверх статистики работает AI-разбор: он читает свежие составы, травмы и мотивацию и выносит вердикт — подтвердить пик, снизить уверенность или отменить. Вопрос честный: добавляет ли он ценность или просто жжёт токены? На футболе разница измеримая.
| Вердикт AI · футбол | Зашло | Винрейт | 95% интервал | Оценка |
|---|---|---|---|---|
| Подтвердил пик | 38/50 | 76.0% | 62.6 – 85.7% | солидно |
| AI не сработал (чистая статистика) | 29/41 | 70.7% | 55.5 – 82.4% | солидно |
Когда AI подтверждает статистический сигнал — +5 пунктов к проходимости. Немного, но стабильно: интервалы пересекаются краями, так что это скорее сигнал направления, чем доказанный факт. Продолжаем измерять.
Материал о доверии обязан начинаться с собственных правил. Вот они, без прикрас.
Каждый пик публикуется до начала игры, с датой и временем, и после этого не редактируется. Никаких «мы так и думали» задним числом.
Весь архив идёт в хронологическом порядке — выигранные и проигранные вперемешку. Проигранный пик остаётся проигранным. Мы не подчищаем холодные недели.
До этого сезона мы не сохраняли коэффициент в момент публикации пика — значит, честно посчитать доходность невозможно, а рисовать её из воздуха мы не будем. С нового сезона цена фиксируется вместе с прогнозом, и ROI появится.
Высокий процент попаданий на крупных фаворитах с низкой ценой сам по себе не означает заработок. Поэтому мы ведём материал калибровкой, а процент — как поддержку.
С сентября трек-рекорд становится полностью проверяемым — и замер идёт только вперёд, без правок задним числом.