Transparency
Отчётность SportViewLab
Принципы, по которым прогнозы фиксируются, результаты учитываются, а изменения моделей отделяются от уже опубликованных оценок.
PERELMAN · ПРОВЕРЯЕМАЯ СТАТИСТИКА
Фактическая результативность модели
Показатели рассчитываются только по завершённым и зафиксированным до матча прогнозам PERELMAN. Точный счёт показывается отдельно и не входит в общий процент основных рынков.
Загрузка фактических данных…
1X2Наиболее вероятный исход
——Тотал 2.5ТБ или ТМ по большей вероятности
——Обе забьютДа или Нет по большей вероятности
——Точный счётTop-1, отдельно от общей точности
——По турнирам
Основные рынки| Турнир | Матчи | Решения | Точность |
|---|---|---|---|
| Загрузка… | |||
По версиям модели
Без смешения версийЗагрузка…
Последние рассчитанные матчи
Финальный результат + модельные решенияЗагрузка…
Общий процент считается по трём основным рынкам: 1X2, ТБ/ТМ 2.5 и «Обе забьют». Один матч может давать до трёх решений, поэтому число решений больше числа матчей. Для каждого рынка выбирается сторона с максимальной сохранённой до матча вероятностью.
Принципы
Что должна показывать отчётность
Отчёт нужен не для красивой витрины, а для воспроизводимой проверки того, что именно модель оценивала до начала матча.
Исходная оценка
Вероятности и модельные показатели фиксируются до завершения события и не переписываются под результат.
Фактический результат
После матча прогноз сопоставляется с тем, что произошло на поле, без смешения прогноза и постфактум-анализа.
Версия модели
Изменения модели должны быть отделены от исторических прогнозов, чтобы сравнение оставалось корректным.
Агрегированная оценка
Качество модели имеет смысл оценивать на серии матчей, а не по одному удачному или неудачному исходу.
Цикл
Как формируется проверяемый результат
-
1
Публикация прогноза
До матча сохраняется модельная оценка, относящаяся к конкретному событию.
-
2
Завершение матча
После финального статуса фиксируется фактический результат события.
-
3
Сопоставление
Прогноз сравнивается с результатом по заранее определённым показателям.
-
4
Накопление выборки
Отдельные матчи объединяются в выборку, на которой можно оценивать устойчивость модели.
Интерпретация
Как читать отчёты корректно
Единичный результат не показывает устойчивость модели. Важна серия наблюдений.
Сравнение корректно только тогда, когда понятно, какая версия модели сформировала прогноз.
Модельная вероятность описывает оценку неопределённости, а не гарантирует конкретный исход.
Связанные разделы