Месяц гонки прогнозистов Dala Sport: кто чаще угадывает исходы

Ровно месяц назад в разделе прогнозов Dala Sport появилось то, чего раньше не было: открытый счёт. Каждый, кто ставит свою фамилию под расчётом на матч, теперь отвечает за него цифрой в рейтинге. Четыре человека из редакции и алгоритм Dala Sport KZ соревнуются в одном и том же — кто чаще угадает исход. За первый месяц через рейтинг прошли сотни матчей, и картина получилась куда плотнее, чем мы ожидали: между первым и пятым местом — меньше трёх процентных пунктов, а лидерство решают сотые доли.

Разбираем, как устроено состязание, кто в нём участвует, что показали первые недели и почему 49% угаданных исходов в футболе — это не «меньше половины», а очень серьёзный результат.

С чего всё началось

Идея простая. Прогноз в интернете ничего не стоит, если за ним не стоит история. Любой может написать «победит Эспаньол», и если угадал — напомнить об этом, а если нет — промолчать. Мы решили сделать наоборот: каждый прогноз фиксируется до матча, после финального свистка засчитывается автоматически, а итог виден всем — и на странице раздела, и в боковой колонке каждого матча.

Как устроено состязание

Правила намеренно сделаны прозрачными.

Что считается. Главный показатель рейтинга — доля угаданных исходов. Каждый участник называет исход матча: победа хозяев (П1), ничья или победа гостей (П2). Если исход совпал с итоговым результатом — прогноз засчитывается как угаданный. Рейтинг показывает, сколько матчей угадано из скольких рассчитанных, и процент.

Порог входа. Место в рейтинге появляется только после 20 рассчитанных прогнозов. Это защита от случайности: угадать три матча из трёх может кто угодно, а держать уровень на дистанции — совсем другая задача.

Вторая метрика. Помимо доли угаданных исходов, на странице прогнозов ведётся оценка по Brier — она учитывает не только какой исход назван, но и с какой вероятностью. Чем меньше значение, тем лучше. Если угадывание исхода отвечает на вопрос «прав или нет», то Brier — на вопрос «насколько честно ты оценил свою уверенность». Прогнозист, который ставит 80% на фаворита и регулярно ошибается, по Brier будет наказан сильнее, чем тот, кто осторожно писал 45%.

Никаких правок задним числом. Прогноз, опубликованный до матча, остаётся таким, каким был. Именно поэтому в карточке каждого матча видно не только итоговое мнение, но и вероятности, на которые опирался автор.

Участники

В гонке пятеро — четыре человека и один алгоритм. Интереснее всего то, что у каждого свой метод, и это хорошо видно по подписям к прогнозам.

Аргын Рахметов, ответственный редактор. Готовит разборы матчей — форма команд, последние результаты, контекст турнира. Его прогноз — это взгляд редактора, который видит матч целиком, а не только цифры.

Ерлан Сагинов, спортивный обозреватель. Его расчёт строится на форме, где каждый матч взвешен силой соперника. Проще говоря, победа над аутсайдером для него весит меньше, чем ничья с лидером. Это попытка отделить реальную силу команды от удачного календаря.

Тимур Касенов, спортивный обозреватель. Отталкивается от линии букмекерского рынка и смещает оценку там, где с ней спорит модель Dala Sport. По сути, это «рынок с поправкой»: рынок знает многое, но не всё.

Серик Тулегенов, редактор спортивного направления. Его подход — оборонительный сценарий: расчёт идёт через сетку счетов при низком тотале. Он исходит из того, что большинство матчей решается одним-двумя голами, и строит оценку именно от этого.

Модель Dala Sport KZ — алгоритм. Считает вероятности по последним матчам: сколько команды забивают и пропускают, с поправкой на домашнее поле, а распределение голов — по Пуассону. Модель не устаёт, не болеет за любимый клуб и не пропускает матчи — поэтому у неё заметно больше рассчитанных прогнозов, чем у людей.

На первый взгляд — почти ровная линия. Но в деталях есть несколько историй.

Дуэль за первое место: решают сотые доли

Аргын Рахметов и Ерлан Сагинов делят 49%, но если посчитать точнее, разрыв почти невидим: у Аргына 48,81%, у Ерлана — 48,78%. Разница — три сотых процентного пункта. Это даже не один матч. Один угаданный или неугаданный прогноз двигает долю примерно на 0,3 пункта, то есть лидерство поменяется при первом же расхождении их мнений на результативном туре.

При этом пути к этим цифрам разные. Ерлан идёт через форму, очищенную от силы соперников, — подход, который хорошо работает на длинной дистанции и особенно полезен в начале сезона, когда таблица ещё обманчива. Аргын — через полный разбор матча, где цифры дополняются контекстом. Тот факт, что два настолько разных метода дают почти одинаковый результат, сам по себе интересен: значит, ни один из них пока не нашёл систематического преимущества.

Важная деталь: у Аргына больше всех рассчитанных прогнозов среди людей — 168. Держать 49% на большей выборке сложнее, чем на меньшей, потому что в неё попадают не только матчи, где мнение уверенное, но и «серые» встречи, где разумно было бы и промолчать.

Тимур и рынок: третье место с отставанием в один пункт

Тимур Касенов — 75 угаданных из 157, 47,77%. От лидеров он отстаёт чуть больше чем на процентный пункт. В пересчёте на матчи это примерно два угаданных исхода — разрыв, который закрывается за один удачный уик-энд.

Подход Тимура — самый «приземлённый»: он стартует от того, что думает рынок. Букмекерская линия аккумулирует огромное количество информации, и обыграть её систематически крайне трудно. Поэтому результат Тимура — это неплохой ориентир: примерно так и должен выглядеть прогнозист, который в целом доверяет рынку и спорит с ним точечно. Если кто-то из участников стабильно уйдёт от него вперёд, это будет означать, что его метод действительно добавляет что-то сверх рыночного консенсуса.

Модель против людей

Самый частый вопрос, который нам задают: «А кто лучше — алгоритм или человек?» После первого месяца ответ такой: три человека из четырёх пока впереди модели, но разрыв минимальный.

У модели Dala Sport KZ 104 угаданных исхода из 220 — 47,27%. Это четвёртое место, на полтора пункта ниже лидеров. Но цифры надо читать с поправкой на выборку. Модель считает всё подряд — 220 матчей против 157–168 у людей. Редакторы закрывали примерно три четверти того объёма, который прошёл через алгоритм. А чем шире выборка, тем больше в ней матчей без явного фаворита, где любой прогноз ближе к подбрасыванию монеты.

Есть и обратная сторона. Модель не делает поправок на то, чего нет в цифрах: смену тренера, мотивацию в последнем туре, ротацию перед еврокубками, погоду. Люди это учитывают — и, похоже, именно этим зарабатывают свои полтора пункта. Но люди же и ошибаются там, где модель холодна: переоценивают громкие имена, недооценивают скучные команды.

Для нас главный вывод в другом: модель, которая сама по себе держит 47% на 220 матчах, — это надёжная база. Все четверо редакторов видят её расчёт и могут с ним спорить. Вопрос следующих месяцев — насколько часто их несогласие с моделью оказывается правым.

Серик Тулегенов: последнее место, которое не значит «плохо»

Серик Тулегенов замыкает таблицу: 73 из 158, 46,2%. Отставание от лидеров — около 2,6 пункта, что на его выборке примерно равно четырём-пяти угаданным исходам. Догнать первую строчку ему нужно примерно столько же матчей, сколько бывает в одном насыщенном игровом дне.

У его метода есть особенность, которая объясняет позицию. Оборонительный сценарий с низким тоталом заметно чаще допускает ничью. В модели Серика ничья нередко получает 35–36% — больше, чем у коллег. А ничья — самый трудный для угадывания исход: даже когда её вероятность высока, она редко оказывается самой вероятной. Поэтому на метрике «угадан ли исход» такой подход проигрывает. Зато на тоталах он работает иначе: в карточках матчей у Серика нередко более решительная оценка на «меньше 2.5», и именно там его подход может оказаться сильнее. Это хороший пример того, почему одна метрика никогда не рассказывает всей истории.

Почему 49% — это много

На первый взгляд кажется, что угадывать меньше половины матчей — слабо. На самом деле это не так.

В футболе у каждого матча три исхода. Если выбирать наугад, вы будете угадывать около трети. Следовать фавориту — уже лучше, но фавориты в футболе проигрывают и играют вничью гораздо чаще, чем кажется: игра малорезультативная, один эпизод переворачивает всё. Ничья — постоянный «третий лишний», который съедает долю у любого, кто выбирает только между победами.

На этом фоне 46–49% — это результат, близкий к пределу того, что вообще достижимо на массовой выборке матчей. Разница между 46% и 49% на сотне матчей кажется небольшой, но на дистанции в сезон это десятки исходов. Именно поэтому мы считаем рейтинг не на десятке игр, а ставим порог в 20 прогнозов и смотрим на динамику месяцами.

Когда все согласны — и когда нет

Самое интересное в работе пяти прогнозистов — моменты, когда их мнения расходятся. Но бывает и наоборот.

Хороший пример — предстоящий матч Ла Лиги «Малага» — «Эспаньол» 10 октября. Здесь согласие полное: все пятеро ставят на победу гостей. Модель даёт «Эспаньолу» 50%, ничьей — 30%, «Малаге» — 20%. «Малага» подходит к матчу двадцатой, без побед в семи турах и с разницей мячей 3:12; «Эспаньол» — пятнадцатый, забивает восемь матчей подряд.

Но даже при единогласии видно, как по-разному авторы приходят к одному выводу. Ерлан даёт гостям 43%, Тимур — 42%, Серик — 45%, при этом у Серика самая высокая оценка ничьей (36%) и самая низкая — хозяевам (19%). Тимур, стартующий от рынка, ближе всех к линии букмекеров, где ставки на П1 и П2 почти равны. То есть «согласие» — это согласие в направлении, а не в цифрах. И именно цифры потом покажут, кто оценил матч точнее, по Brier.

Матчи с единогласным прогнозом рейтинг почти не двигают: если все угадали или все ошиблись, отрыв не меняется. Рейтинг делают матчи раскола, где один автор идёт против остальных. Поэтому лидерство в такой плотной таблице — это в первую очередь умение не ошибаться, когда идёшь против большинства.

Что мы узнали за месяц

Подведём короткий итог первых недель.

Во-первых, разброс между участниками минимален — 2,6 процентного пункта от первого до пятого места. На такой дистанции это ещё не сила метода, а во многом шум. Настоящая картина проявится к концу осени, когда у каждого будет по 300–400 прогнозов.

Во-вторых, люди пока немного впереди модели, но модель уже доказала, что она — честная планка. Любой, кто хочет остаться выше неё, должен приносить информацию, которой в цифрах нет.

В-третьих, методы действительно разные, и это видно: рыночный подход Тимура, форма с учётом соперников у Ерлана, оборонительная сетка у Серика, редакторский разбор у Аргына и чистая статистика у модели. Мы не стремимся к тому, чтобы все считали одинаково, — наоборот, ценность рейтинга в том, что он сравнивает подходы.

В-четвёртых, доля угаданных исходов — не единственная метрика. Мы будем всё больше внимания уделять Brier и точности по тоталам, потому что они лучше показывают качество оценки вероятностей, а не только удачу в выборе исхода.

Как следить за гонкой

Рейтинг прогнозистов обновляется автоматически после каждого матча. Его можно увидеть в боковой колонке на странице любого прогноза и в разделе «Точность прогнозистов» на странице всех прогнозов. В карточке каждого матча видно, что поставил каждый участник, с какой вероятностью и как он пришёл к этому выводу.

Следующий отчёт — через месяц. Посмотрим, удержит ли Аргын Рахметов первую строчку, сможет ли модель обойти людей и сократит ли Серик Тулегенов те четыре-пять матчей, которые отделяют его от лидеров.

18+. Прогнозы носят информационный характер и не являются призывом к участию в азартных играх. Вероятности считает модель Dala Sport KZ, разборы готовит редакция — это расчёт, а не совет по ставке. Играйте ответственно.