Прошлогодний проходной балл - не точка

Мы собрали 27 100 проходных баллов 66 российских вузов за 2011-2026 годы. Не с агрегаторов, а из первоисточников: приказов о зачислении, конкурсных списков и официальных страниц итогов приёма. Каждая цифра в нашей базе ссылается на документ, из которого она взята.

Дальше честный эксперимент, который называется бэктестом: встаём в прошлое и «предсказываем» проходной каждого года, зная только предыдущие годы. Потом сравниваем с тем, что случилось на самом деле. Так мы получили 1678 проверок по программам, у которых есть история хотя бы за 4 года.

Стратегия «беру прошлогодний проходной» ошибается в медиане на 11 баллов. Уже это много: конкурс на сильных программах решают один-два балла. Но медиана — не главная беда. Главная — хвост:

Переведём: если в прошлом году проходной был 260, а у вас 270, то «запас в 10 баллов» на деле не запас. В каждом десятом случае проходной уходит от прошлогоднего на 34 балла и больше - в ту или другую сторону. Для абитуриента опасна та часть этих случаев, когда проходной вырос: именно рост вверх мы и закладываем в порог Safe. Абитуриент, который выбрал вуз «с запасом», в августе обнаруживает себя за чертой - и уже поздно перекладывать приоритеты.

Мы попробовали. Среднее за три года, линейный тренд, модель с подтяжкой к среднему - всё на тех же 1678 проверках. Лучшая модель ошибается в среднем на 15,1 балла против 15,6 у наивной. (Средняя ошибка больше медианной, которая равна 11 баллам, потому что редкие большие скачки тянут среднее вверх: это одна и та же картина, увиденная с двух сторон.) Выигрыш - три процента. Прошлогодний балл почти так же хорош, как любая из этих моделей: следующий год от него отклоняется слабо предсказуемо. Одна из причин - абитуриенты сами смотрят на прошлогодние проходные и перетекают туда, где было ниже, сдвигая баллы в следующем году; но этот возврат слабый и тонет в шуме, иначе модель с подтяжкой к среднему выигрывала бы заметно сильнее.

Отсюда неудобный, но важный вывод: точный проходной следующего года не знает никто. Сервис, который называет вам «предсказанный балл» без интервала и без проверки точности, даёт больше уверенности, чем есть в данных.

Хотя точку предсказать нельзя, размах колебаний оценить можно, и на истории эта оценка сбывается. Мы построили интервалы риска на исторических скачках самого вуза и проверили их на тех же 1678 случаях (21 вуз, где истории хватило): там, где мы заявляем «попадёт с вероятностью 80%», факт попал в 80% случаев. Порог «безопасно» с запасом на 95% уверенности провалился в 5,7% случаев - при целевых 5%. В подборе у большинства вузов своей истории пока мало, и пороги берутся из общего пула всех вузов: для них эта проверка косвенная.

Это и есть честный ответ на вопрос «куда подавать»: не «балл будет 276», а «с вашими баллами эта программа безопасна, на этой шанс около половины и выше, а на этой - меньше половины». Как мы считаем запас для каждого вуза - в открытой методике.