Когда ваш ребенок приходит из школы с непостижимой красной отметкой на результатах теста (что вообще означает 153? Это из 200? 154?) Ваш первый вопрос, вероятно, «каков был средний балл?» Вашему ребенку не обязательно быть гением, но приятно знать, что он или она, по крайней мере, средний. Вот почему корыстные, но кажущиеся законными результаты исследования, проведенного с помощью онлайн-инструмента оценки Gradescope на основе рубрик, так нервируют. Плохие результаты по математике уже давно понимаются через призму плохой математики.
«Нет среднего ученика», Лиз Карлсон из Gradescope заявила в блоге компании. Действительно, исследование сообщает, что из 1500 студентов-информатиков, представивших ответы на семь вопросов выпускного экзамена, только один набрал в среднем 20 процентов по всем семи вопросам. Команда Gradescope проанализировала данные об оценках по курсу информатики для 1500 студентов, который состоял из семи вопросов и 26 подвопросов. Наилучший балл был (каким-то образом?) 80, а средний балл среди студентов - 46. Тем не менее, исследователи обнаружили, что только один из студентов набрал в среднем 20 процентов по всем семи вопросам.
Менее 1 из 25 студентов набрали средний балл по пяти и более вопросам. Около 25% студентов не получили средних оценок. по единственному вопросу.
Теперь исследование Gradescope не публикуется в рецензируемом журнале, и у исследователей есть существенный конфликт интересов. Результаты показывают, например, что необходим более индивидуальный и подробный подход к выставлению оценок - и так уж получилось, что Gradescope продает именно это. Тем не менее, результаты повторить предыдущее исследование это предполагает, что единые стандарты, такие как тесты, устарели, и что действительно среднестатистических студентов (и людей в целом), вероятно, не существует.
Еще больше сбивает с толку то, что среди горстки студентов, получивших общие баллы в пределах 20 процентов от среднего (то есть между 41,4 и 50,6) не менее 14 не набрали в среднем 20 процентов по любому из семи вопросов. Другими словами, их общие оценки были средними, а их результаты по отдельным вопросам теста - нет. Полученные результаты требуют последующего наблюдения и рецензирования, но в целом предполагают, что выставление оценок по кривой - и, действительно, обычная оценка, как мы ее знаем, - не позволяет уловить сильные и слабые стороны учащихся.
“Мы обнаружили, что расхождение между студентами, набравшими средний балл, может составлять более 40 процентов - действительно значительная разница в том, что именно изучил каждый студент », - пишет Карлсон. «Мы посмотрели на двух студентов, которые набрали 51,5 из 80 баллов на экзамене. Несмотря на то, что они набрали одинаковый балл, между ними было 67 расхождений в рубриках, или почти 44 процента от всех рубрик ».
«По сути, они понимали только половину того же материала».