Ранговый анализ в оценке валидности олимпиадных заданий

Аннотация

Ранговый анализ (ценологический подход), опирающийся на строгий математический аппарат, позволяет на научной объективной основе проводить диагностику состояния образовательных систем и процессов. В основе рангового анализа – применение закона гиперболического рангового распределения объектов в системах-ценозах, являющегося уточнённым законом Парето 20/80 (закон Парето-Кудрина). На примере использования рангового анализа в оценке валидности олимпиадных заданий всероссийской многопрофильной инженерной олимпиады «Звезда» показана необходимость внедрения рангового анализа в практику управления качеством образования. Показано, этот закон важно и целесообразно применять в управлении качеством образования. Оптимизация образовательных систем и процессов с помощью рангового анализа заключается в устранении аномальных отклонений от гиперболического закона, что возможно лишь при графической визуализации рангового распределения и его аппроксимации. График рангового распределения обеспечивает наглядность и представление о характере рангового убывания. Недочёты в содержании олимпиадных (а также тестовых) заданий, дающие ухудшение их валидности и надежности, проявляются в виде искажений гиперболического графика (горбы, впадины, хвосты, вырождение гиперболы в другие зависимости). Проводимый на научной основе, ранговый анализ позволяет объективно выделять несколько уровней валидности олимпиадных или тестовых заданий. Приведены графики ранговых распределений, иллюстрирующие примеры высокой (естественно-научное направление) и ниже средней (история) валидностей олимпиадных заданий. Образовательные системы являются ценозами, объекты ранжирования в них – учащиеся, классы, школы и т. д., а их ранжируемые параметры – это успеваемость, рейтинг в баллах, показатели эффективности и т. п. Применение несложного математического аппарата рангового анализа и компьютерных программ выводят технологии оценки качества образования на более высокий уровень, отвечающий вызовам времени.