Как сравнить сложность школьных олимпиад
Безусловно способности детей распределены неравномерно. Бывают и явно выраженные гуманитарии и чистые математики. Для математика выиграть олимпиаду по литературе во много раз сложнее, чем победить на математической олимпиаде. Поэтому сложность школьной олимпиады — вещь относительная и зависит от способностей ребенка.
Но предположим, что ребенок имеет хорошие способности в математике, физике и информатике и ему все три предмета нравятся. Если уделять всем предметам одинаковое время, то шансы выиграть всероссийскую олимпиаду по какому-то из этих трех предметов будут ниже, чем если сконцентрироваться на одном из них. Какой предмет выбрать, чтобы было больше шансов стать победителем? Другой пример, как выбрать между литературой и историей?
Статус победителя Всероссийской олимпиады школьников помимо приличного денежного приза дает возможность поступления в ВУЗ без учета результатов ЕГЭ, да еще и на бюджетное место. Очень хорошая мотивация для участия в олимпиадах. Подготовка ребенка к уровню победителя ВОШ занимает много времени и ресурсов. И многие школьники и их родители хотели бы понимать, в какой области их усилия могут дать лучше результат.
Для сравнения степени сложности школьных олимпиад можно использовать статистику результатов выступления школьников. Предположим, что 20 учеников 9-10 классов стали победителями и призерами ВОШ по одному из предметов. В соответствии с правилами проведения олимпиады они без отбора приглашаются на финал следующего года. У них есть опыт побед в финале, год времени на совершенствование своих знаний по предмету и что также важно их соперники по финалу из 11 класса уже не смогут принять участия и на смену им придут более молодые и менее опытные соперники. Кажется, что повторить или улучшить свой прошлогодний результат в таких условиях не так уж и трудно. Однако, рассмотрим два возможных варианта:
- 10 человек улучшили свой прошлогодний результат и 10 показали такой же.
- 10 человек показали такой же результат, а 10 ухудшили свой результат.
В каком из этих двух случаев можно сказать, что олимпиада была более сложной? На мой взгляд очевидно, что чем большая доля прошлогодних победителей и призеров показывают в новом году результат лучше, тем легче им дается олимпиада. И наоборот, если школьники через год показывают результат хуже, то это говорит о более высокой сложности. В соответствии с этой логикой было выбрано 3 критерия для сравнения сложности различных предметов ВОШ:
- Для всех учеников, которые принимали участие в финалах олимпиады по предмету в 2017 и 2018 году, считаем долю учеников, которые улучшили свои результаты в 2018 году. Это участники финала 2017, которые стали призерами или победителями в 2018 году или призеры 2017 года, ставшие победителями в 2018 году.
- Для всех победителей и призеров 2017 года, которые также принимали участие в финале 2018 года, считаем долю учеников, которые не ухудшили свои результаты в 2018 году.
- Для всех участников финала 2017 года, не ставших победителями и призерами, которым пришлось заново отбираться на финал 2018 года через предварительные этапы, считаем долю учеников успешно прошедших в финал 2018 года.
Расчет рейтинга сложности предметов на ВОШ
Таблица 1. Результаты победителей финалов 2017 года в финале 2018 года
| Предмет | 2017 | 2018 | Доля, % | Поб 2018 | Пр 2018 |
|---|---|---|---|---|---|
| Английский | 6 | 3 | 50% | 2 | 0 |
| Астрономия | 3 | 3 | 100% | 2 | 1 |
| Биология | 5 | 5 | 100% | 4 | 1 |
| География | 5 | 4 | 80% | 4 | 0 |
| Информатика | 1 | 1 | 100% | 1 | 0 |
| Испанский | 2 | 2 | 100% | 0 | 2 |
| История | 5 | 4 | 80% | 2 | 2 |
| Итальянский | 2 | 2 | 100% | 1 | 1 |
| Китайский | 1 | 0 | 0% | 0 | 0 |
| Литература | 4 | 3 | 75% | 0 | 2 |
| Математика | 5 | 5 | 100% | 2 | 3 |
| МХК | 5 | 5 | 100% | 2 | 1 |
| Немецкий | 4 | 4 | 100% | 4 | 0 |
| Обществознание | 5 | 4 | 80% | 1 | 3 |
| ОБЖ | 4 | 4 | 100% | 2 | 2 |
| Право | 6 | 6 | 100% | 1 | 3 |
| Русский | 8 | 7 | 88% | 1 | 6 |
| Технология | 1 | 0 | 0% | 0 | 0 |
| Физика | 3 | 3 | 100% | 1 | 2 |
| Физкультура | 1 | 1 | 100% | 1 | 0 |
| Французский | 4 | 1 | 25% | 1 | 0 |
| Химия | 4 | 3 | 75% | 1 | 2 |
| Экология | 2 | 2 | 100% | 1 | 1 |
| Экономика | 3 | 3 | 100% | 1 | 1 |
Примечания:
- В колонке «2017» показано количество победителей финалов 2017 года младше 11 класса, которые могли принять участие в финале 2018 года.
- В колонке «2018» показано количество победителей финалов 2017 года, принявших участие в финале 2018 года.
- В колонке «Доля, %» показана процентная доля победителей 2017 года, принявших участие в финале 2018 года.
- В колонке «Поб 2018» указано количество победителей финала 2018 года из числа победителей 2017 года.
- В колонке «Пр 2018» указано количество призеров финала 2018 года из числа победителей 2017 года.
Таблица 2. Результаты призеров финалов 2017 года в финале 2018 года
| Предмет | 2017 | 2018 | Доля, % | Поб 2018 | Пр 2018 |
|---|---|---|---|---|---|
| Английский | 15 | 9 | 60% | 1 | 5 |
| Астрономия | 13 | 13 | 100% | 3 | 7 |
| Биология | 16 | 16 | 100% | 2 | 8 |
| География | 14 | 14 | 100% | 5 | 7 |
| Информатика | 19 | 19 | 100% | 3 | 15 |
| Испанский | 12 | 11 | 92% | 5 | 6 |
| История | 22 | 19 | 86% | 5 | 10 |
| Итальянский | 3 | 2 | 67% | 0 | 0 |
| Китайский | 4 | 4 | 100% | 1 | 1 |
| Литература | 23 | 21 | 91% | 4 | 9 |
| Математика | 26 | 25 | 96% | 5 | 13 |
| МХК | 23 | 21 | 91% | 3 | 12 |
| Немецкий | 14 | 14 | 100% | 4 | 9 |
| Обществознание | 18 | 18 | 100% | 2 | 10 |
| ОБЖ | 20 | 20 | 100% | 2 | 8 |
| Право | 29 | 26 | 90% | 3 | 8 |
| Русский | 31 | 27 | 87% | 3 | 19 |
| Технология | 7 | 6 | 86% | 2 | 3 |
| Физика | 28 | 25 | 89% | 0 | 14 |
| Физкультура | 2 | 2 | 100% | 1 | 1 |
| Французский | 9 | 8 | 89% | 5 | 2 |
| Химия | 17 | 17 | 100% | 2 | 9 |
| Экология | 12 | 11 | 92% | 2 | 8 |
| Экономика | 12 | 11 | 92% | 0 | 9 |
Примечания:
- В колонке «2017» показано количество призеров финалов 2017 года младше 11 класса, которые могли принять участие в финале 2018 года.
- В колонке «2018» показано количество призеров финалов 2017 года, принявших участие в финале 2018 года.
- В колонке «Доля, %» показана процентная доля призеров 2017 года, принявших участие в финале 2018 года.
- В колонке «Поб 2018» указано количество победителей финала 2018 года из числа призеров 2017 года.
- В колонке «Пр 2018» указано количество призеров финала 2018 года из числа призеров 2017 года.
Таблица 3. Результаты участников финалов 2017 года в финале 2018 года
| Предмет | 2017 | 2018 | Доля, % | Поб 2018 | Пр 2018 |
|---|---|---|---|---|---|
| Английский | 15 | 9 | 60% | 1 | 5 |
| Астрономия | 12 | 4 | 33% | 0 | 2 |
| Биология | 10 | 6 | 60% | 0 | 2 |
| География | 7 | 2 | 29% | 0 | 1 |
| Информатика | 27 | 19 | 70% | 1 | 10 |
| Испанский | 5 | 3 | 60% | 1 | 2 |
| История | 7 | 5 | 71% | 1 | 2 |
| Итальянский | 4 | 1 | 25% | 0 | 0 |
| Китайский | 5 | 2 | 40% | 0 | 0 |
| Литература | 19 | 5 | 26% | 0 | 3 |
| Математика | 36 | 15 | 42% | 0 | 9 |
| МХК | 29 | 10 | 34% | 2 | 6 |
| Немецкий | 3 | 2 | 67% | 1 | 0 |
| Обществознание | 15 | 4 | 27% | 1 | 1 |
| ОБЖ | 11 | 1 | 9% | 0 | 1 |
| Право | 36 | 16 | 44% | 1 | 11 |
| Русский | 23 | 12 | 52% | 0 | 5 |
| Технология | 6 | 2 | 33% | 0 | 2 |
| Физика | 20 | 5 | 25% | 0 | 2 |
| Физкультура | 0 | 0 | 0% | 0 | 0 |
| Французский | 10 | 9 | 90% | 3 | 3 |
| Химия | 21 | 14 | 67% | 3 | 6 |
| Экология | 10 | 4 | 40% | 1 | 2 |
| Экономика | 11 | 6 | 55% | 1 | 3 |
Примечания:
- В колонке «2017» показано количество участников финалов 2017 года младше 11 класса, которые могли принять участие в финале 2018 года.
- В колонке «2018» показано количество участников финалов 2017 года, принявших участие в финале 2018 года.
- В колонке «Доля, %» показана процентная доля участников финалов 2017 года, принявших участие в финале 2018 года.
- В колонке «Поб 2018» указано количество победителей финала 2018 года из числа участников 2017 года.
- В колонке «Пр 2018» указано количество призеров финала 2018 года из числа участников 2017 года.
Таблица 4. Рейтинг сложности предметов, по которым проводится Всероссийская олимпиада школьников (чем выше рейтинг, тем легче предмет)
| Предмет | Всего | + | +,% | - | -,% | = | =,% | Рейтинг |
|---|---|---|---|---|---|---|---|---|
| Французский | 18 | 11 | 65% | 1 | 11% | 6 | 33% | 243,6% |
| Информатика | 39 | 14 | 37% | 1 | 5% | 24 | 62% | 202,2% |
| Испанский | 16 | 8 | 57% | 2 | 15% | 6 | 38% | 201,8% |
| Немецкий | 20 | 5 | 31% | 1 | 6% | 14 | 70% | 192,4% |
| История | 28 | 8 | 33% | 6 | 26% | 14 | 50% | 178,7% |
| Технология | 8 | 4 | 50% | 1 | 17% | 3 | 38% | 166,7% |
| Английский | 21 | 7 | 39% | 4 | 33% | 10 | 48% | 165,6% |
| Химия | 34 | 11 | 35% | 8 | 40% | 15 | 44% | 162,2% |
| Экология | 17 | 5 | 33% | 2 | 15% | 10 | 59% | 157,9% |
| Физкультура | 3 | 1 | 50% | 0 | 0% | 2 | 67% | 150,0% |
| Экономика | 20 | 4 | 24% | 4 | 29% | 12 | 60% | 149,5% |
| Биология | 27 | 4 | 15% | 7 | 26% | 16 | 59% | 148,9% |
| География | 20 | 6 | 30% | 2 | 10% | 12 | 60% | 148,6% |
| Математика | 45 | 14 | 35% | 10 | 33% | 21 | 47% | 143,3% |
| Русский | 46 | 8 | 21% | 11 | 32% | 27 | 59% | 140,3% |
| Астрономия | 20 | 5 | 25% | 4 | 20% | 11 | 55% | 138,3% |
| МХК | 36 | 11 | 35% | 9 | 35% | 16 | 44% | 135,4% |
| Право | 48 | 15 | 36% | 20 | 63% | 13 | 27% | 117,7% |
| Литература | 29 | 7 | 27% | 11 | 46% | 11 | 38% | 107,4% |
| Китайский | 6 | 1 | 17% | 2 | 50% | 3 | 50% | 106,7% |
| Обществознание | 26 | 4 | 18% | 9 | 41% | 13 | 50% | 103,9% |
| Физика | 33 | 2 | 7% | 13 | 46% | 18 | 55% | 85,2% |
| ОБЖ | 25 | 3 | 14% | 12 | 50% | 10 | 40% | 73,4% |
| Итальянский | 5 | 0 | 0% | 3 | 75% | 2 | 40% | 50,0% |
Примечания:
- В колонке «Всего» показано количество школьников, принявших участие в двух финалах 2017 и 2018 годов.
- В колонке «+» показано количество финалистов 2018 года, улучшивших свой результат 2017 года.
- В колонке «+, %» показана процентная доля финалистов 2018 года, улучшивших результат 2017 года.
- В колонке «-» показано количество финалистов 2018 года, ухудшивших свой результат 2017 года.
- В колонке «-, %» показана процентная доля финалистов 2018 года, ухудшивших результат 2017 года.
- В колонке «=» показано количество финалистов 2018 года, показавших аналогичный результат в 2017 года.
- В колонке «=, %» показана процентная доля финалистов 2018 года, показавших аналогичный результат в 2017 года.
- В колонке «Рейтинг» показан рейтинг сложности предметов на заключительном этапе Всероссийской олимпиады школьников, рассчитанный как сумма вышеназванных трех критериев.
Таблица 5. Рейтинг сложности прохождения из регионального этапа в команду Москвы на заключительный этап
| Предмет | РЭ 2018 | Команда | 2017 | Доля, % | Рейтинг |
|---|---|---|---|---|---|
| Французский | 354 | 70 | 9 | 17,2% | 243,6% |
| Информатика | 604 | 72 | 20 | 8,6% | 202,2% |
| Испанский | 185 | 46 | 13 | 17,8% | 201,8% |
| Немецкий | 269 | 49 | 18 | 11,5% | 192,4% |
| История | 1366 | 72 | 23 | 3,6% | 178,7% |
| Технология | 359 | 20 | 6 | 3,9% | 166,7% |
| Английский | 1330 | 79 | 12 | 5,0% | 165,6% |
| Химия | 729 | 82 | 20 | 8,5% | 162,2% |
| Экология | 796 | 50 | 13 | 4,6% | 157,9% |
| Физкультура | 482 | 22 | 3 | 3,9% | 150,0% |
| Экономика | 749 | 106 | 14 | 12,3% | 149,5% |
| Биология | 1030 | 69 | 21 | 4,7% | 148,9% |
| География | 746 | 41 | 18 | 3,1% | 148,6% |
| Математика | 1201 | 109 | 30 | 6,6% | 143,3% |
| Русский | 2985 | 90 | 34 | 1,9% | 140,3% |
| Астрономия | 338 | 38 | 16 | 6,5% | 138,3% |
| МХК | 967 | 76 | 26 | 5,2% | 135,4% |
| Право | 1727 | 143 | 32 | 6,4% | 117,7% |
| Литература | 3024 | 80 | 24 | 1,9% | 107,4% |
| Китайский | 105 | 14 | 4 | 9,5% | 106,7% |
| Обществознание | 2625 | 88 | 22 | 2,5% | 103,9% |
| Физика | 1311 | 86 | 28 | 4,4% | 85,2% |
| ОБЖ | 1059 | 61 | 24 | 3,5% | 73,4% |
| Итальянский | 93 | 18 | 4 | 15,1% | 50,0% |
Примечания:
- В колонке «РЭ 2018» показано количество школьников, принявших участие в региональном этапе 2018 года.
- В колонке «Команда» показано количество школьников в команде Москвы на заключительном этапе ВОШ 2018 года.
- В колонке «2017» показано количество победителей и призеров ВОШ 2017 года в команде Москвы на заключительном этапе 2018 года.
- В колонке «Доля, %» показана доля участников регионального этапа, прошедших в команду Москвы на финал 2018 года. Например, в команде по информатике на финал 20 мест из 72 достались прошлогодним призерам. 52 места досталось 604 участникам региона. 52/604=8.6%
- Колона «Рейтинг» соответствует такой же колонке из Таблицы 4. Приведена в Таблице 5 для удобства сравнения.
Заключение
Безусловно данный рейтинг сложности предметов из Всероссийской олимпиады школьников не может являться абсолютно точным мерилом какую олимпиаду легче выиграть. Но в виду отсутствия других аналогичных показателей может давать примерное представление для школьников и их родителей, в какой области у них больше шансов добиться успеха.
Следует также учитывать такой показатель из Таблицы 5, как доля участников регионального этапа, которая прошла на заключительный этап в команду Москвы. Например, для русского языка она составляет всего 1,9%, а для французского и испанского языков более 17%. Попадание итальянского языка в конец рейтинга может быть связано с маленьким количеством участников, что не позволяет получить достоверные результаты по такому количеству статистических данных. Большая доля участников регионального этапа, попавших на финал (15,1%) показывает схожесть сложности олимпиады по итальянскому с другими языковыми олимпиадами. Из не языковых олимпиад проще всего было попасть на финал по экономике — 12,3%, а а сложнее всего по литературе — 1,9%.
Если вернуться к вопросу, поставленному в начале статьи, то в данном рейтинге можно найти ответ. Олимпиаду по информатике выиграть проще, чем по математике, а математику проще, чем физику. Для информатики 202,2% / 8,6%, для математики 143,3% / 6,6%, для физики 85,2% / 4,4%. Если сравнивать историю с литературой, то получается что историю выиграть проще: 178,7% /3,6% — 107,4% / 1,9%.
Очень люблю такие статьи на статистику)))Каждые данные можно интерпретировать под выгодные условия или то,что вы хотели показать.Я нашла ошибочка и в критериях,и в оценке данных.А вы?P.S.Рекомендую к прочтению книги «Как не ошибаться»и «Путеводитель во лжи».
Анна, напишите, какие критерии лучше использовать и в чем ошибки по-вашему?
Ну для ясности тут можно сказать, что сравнивать по количеству прошедших на закл, да еще и улучшивших результат — это как-то странно. Во-первых, как можно связать эти параметры? И как какую выборку тут тогда считать генеральной? И по какому принципу можно сравнивать цикл естественных наук с гуманитарными? И каждая олимпиад очень сильно индивидуальна! Нет простых олимпиад, и нельзя их сравнивать. Например, в биологии много тестовых заданий, а также практика, как и в химии, так и в физике. Даже количество разное туров. Одним словом, нельзя притянуть все предметы по одну гребенку. Здесь нужен многофакторный анализ, с большой статистической выборкой. Здесь я не вижу прямой зависимости , да и понятие «сложность» — дано расплывчато. Каждая олимпиад -индивидуальна, да и здесь нет учета так называемых «квотников» из регионов, в которых по проходным никто не прошел. Да и число победителей/призеров везде разное.
Анна, у Вас просто мешанина несвязанных между собой мыслей, все навалено в одну кучу: «все олимпиады индивидуальны», «нет простых олимпиад, их нельзя сравнивать», «нельзя притянуть все предметы под одну гребенку», при этом пишите что «нужен многофакторный анализ с большой статистической выборкой».
Я думаю, что Вам стоит написать организаторам ЕГЭ, что нельзя все предметы оценивать по 100 бальной шкале. Там ведь и количество заданий разное, и материал по истории очень сильно отличается от математики, да и количество участников разное. 🙂
Если Вы не видите зависимости, то это не значит, что ее нет. Рассмотрим простой пример. Количество участников в РЭ по русскому языку в Москве 2985 учеников, из них на заключительный этап прошли 1,9% (менее чем 1 из 50). Участников по испанскому языку 185, на ЗЭ прошли 17,8% (более чем 1 из 6). Уже даже по этим цифрам видно, что шансов попасть на финал у детей, изучающих испанский язык больше, чем у участников олимпиады по русскому языку. Конечно, можно и тут найти «причину» по которой все на самом деле по-другому. Например, в испанском соревнуются профессионалы (у кого родители испанцы), а на олимпиаде по русскому 99% — это дети из Средней Азии, которые в одном слове делают по 3 ошибки. Поэтому надо использовать многофакторный анализ и олимпиаду по русскому языку выиграть проще.
Вот еще более простой пример. Квалифицированных учителей по информатике катастрофически не хватает (https://aftershock.news/?q=node/748679), во многих школах старшеклассники даже не изучают информатику. Многие дети изучают программирование самостоятельно или на курсах. Поэтому количество участников олимпиады по информатике гораздо меньше, чем по математике и средний уровень подготовки программистов ниже, чем математиков. При желании способный ученик почти с нуля может за год подготовиться до уровня участника финала. В математике такой фокус практически невозможен. И это можно в какой-то степени оценить по количеству участников РЭ и доле прохода в финал.
Далее, есть такое понятие, как конкуренция. Чем она выше, тем сложнее добиться хорошего результата. Любая ошибка может дорого стоить. Конкуренцию можно оценить по результатам прошлогодних участников ЗЭ. Например, ученик из 10 класса стал победителем в финале в прошлом году. На следующий год он учится в 11 классе, среди его конкурентов в финале нет прошлогодних 11-классников. Зато появились новички из 9 класса. У них еще нет опыта участия в финале, 2 года разницы с 11 классом. Теоретически, выиграть в этом году у прошлогоднего победителя из 10 класса должно получиться легче. А если ему не удастся это сделать, то это означает, что «сложность» предмета выше, чем если бы прошлогодние победители легко подтверждали свой прошлогодний статус. Теперь рассмотрим результаты участников финала 2018 по информатике: только 5% участников из финала 2017 года ухудшили свой результат, 37% — улучшили. А по физике, 46% участников ухудшили свой результат по сравнению с 2017 годом, и только 7% улучшили. Я даже не знаю, каким образом можно прицепить сюда многофакторный анализ, чтобы обосновать более легкую олимпиаду по физике по сравнению с информатикой.