Честный post-match benchmark

Статистика прогнозов

Сравниваем только прогнозы, реально сохранённые до старта матча. Внешние модели и букмекерская линия не обучают Victory Monitor — они остаются независимым контрольным слоем.

CS2наша модель
Сегодня56.7%17/30
7 дней58.8%20/34
30 дней58.8%20/34
LoLнаша модель
Сегодня38.5%5/13
7 дней46.7%7/15
30 дней46.7%7/15
Dota 2наша модель
Сегодня80.0%4/5
7 дней80.0%4/5
30 дней80.0%4/5

Внешний benchmark

Кто лучше выбирает победителя

На одном графике: production LR-0.6, shadow GHLR, Glicko, BO3.GG, sport.gg и Market Consensus. Фильтр оставляет матчи, где до старта было хотя бы два независимых прогноза; строгое same-sample сравнение LR/GHLR/Glicko находится на странице «Модели».

Сравнение моделей

CS2

LR-0.6GHLRGlickoBO3.GGsport.ggMarket
Сравнение моделей

LoL

LR-0.6GHLRGlickoBO3.GGsport.ggMarket
Сравнение моделей

Dota 2

LR-0.6GHLRGlickoBO3.GGsport.ggMarket

Прогресс Victory Monitor

Как развивается наша модель

Точки — дневная точность, линии — 7-дневная скользящая точность production LR-0.6, shadow GHLR и Glicko. Новые shadow-линии начинаются только с тех матчей, где прогноз реально был сохранён до старта; историю задним числом не дорисовываем.

Наша модель

CS2

LR-0.6 · 7 днейGHLR · 7 днейGlicko · 7 днейТочки · деньСмена production
Наша модель

LoL

LR-0.6 · 7 днейGHLR · 7 днейGlicko · 7 днейТочки · деньСмена production
Наша модель

Dota 2

LR-0.6 · 7 днейGHLR · 7 днейGlicko · 7 днейТочки · деньСмена production
Accuracy — только верхний слой.

Для Victory Monitor и sport.gg дополнительно считаются Log Loss и Brier. Для BO3.GG мы не превращаем технический proximity factor в выдуманную вероятность, поэтому там честно остаётся accuracy выбора победителя.

Никакого future leakage.

Статистика использует последний допустимый снимок до начала матча. После старта прогноз не пересчитывается задним числом.