<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.3 20210610//EN" "JATS-journalpublishing1-3.dtd">
<article article-type="research-article" dtd-version="1.3" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xml:lang="ru"><front><journal-meta><journal-id journal-id-type="publisher-id">profed</journal-id><journal-title-group><journal-title xml:lang="ru">Профессиональное образование в современном мире</journal-title><trans-title-group xml:lang="en"><trans-title>Professional education in the modern world</trans-title></trans-title-group></journal-title-group><issn pub-type="ppub">2224-1841</issn><publisher><publisher-name>FSEP “Publisher SB RAS”</publisher-name></publisher></journal-meta><article-meta><article-id pub-id-type="doi">10.20913/2618-7515-2020-4-14</article-id><article-id custom-type="elpub" pub-id-type="custom">profed-749</article-id><article-categories><subj-group subj-group-type="heading"><subject>Research Article</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="ru"><subject>ПЕДАГОГИКА</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="en"><subject>PEDAGOGICS</subject></subj-group></article-categories><title-group><article-title>Ранговый анализ в оценке валидности олимпиадных заданий</article-title><trans-title-group xml:lang="en"><trans-title>Rank analysis in evaluating the validity of olympiad tasks</trans-title></trans-title-group></title-group><contrib-group><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Гурина</surname><given-names>Р. В.</given-names></name><name name-style="western" xml:lang="en"><surname>Gurina</surname><given-names>R. V.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Гурина Роза Викторовна – доктор педагогических наук, доцент, профессор кафедры физических методов в прикладных исследованиях, инженерно-физический факультет высоких технологий</p><p>Российская Федерация, 432000, Ульяновск, ул. Льва Толстого, 42</p></bio><bio xml:lang="en"><p>Rose V. Gurina – Doctor of Pedagogical Sciences, Associate Professor, Professor, Department of Physical Methods in Applied Research, Faculty of Engineering and Physics of High Technologies</p><p>42 L. Tolstoy Str., Ulyanovsk, 432000, Russian Federation</p></bio><email xlink:type="simple">roza-gurina@yandex.ru</email><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Морозова</surname><given-names>Е. В.</given-names></name><name name-style="western" xml:lang="en"><surname>Morozova</surname><given-names>E. V.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Морозова Екатерина Владимировна – кандидат физико-математических наук, кафедра физических методов в прикладных исследованиях, инженерно-физический факультет высоких технологий</p><p>Российская Федерация, 432000, Ульяновск, ул. Льва Толстого, 42</p></bio><bio xml:lang="en"><p>Ekaterina V. Morozova – Сandidate of Physical-Mathematical Science, Department of Physical Methods in Applied Research, Faculty of Engineering and Physics of High Technologies</p><p>42 L. Tolstoy Str., Ulyanovsk, 432000, Russian Federation</p></bio><email xlink:type="simple">kat-valezhanina@yandex.ru</email><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Кошева</surname><given-names>В. В.</given-names></name><name name-style="western" xml:lang="en"><surname>Kosheva</surname><given-names>V. V.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Кошева Вилена Вячеславовна – аспирант кафедры физического материаловедения, инженерно-физический факультет высоких технологий</p><p>Российская Федерация, 432000, Ульяновск, ул. Льва Толстого, 42</p></bio><bio xml:lang="en"><p>Kosheva V. Vilena – postgraduate student, Department of Physical Materials Science, Faculty of Engineering and Physics of High Technologies</p><p>42 L. Tolstoy Str., Ulyanovsk, 432000, Russian Federation</p></bio><email xlink:type="simple">vilenabedash@yandex.ru</email><xref ref-type="aff" rid="aff-1"/></contrib></contrib-group><aff-alternatives id="aff-1"><aff xml:lang="ru"><institution>Ульяновский государственный университет</institution><country>Россия</country></aff><aff xml:lang="en"><institution>Ulyanovsk State University</institution><country>Russian Federation</country></aff></aff-alternatives><pub-date pub-type="collection"><year>2020</year></pub-date><pub-date pub-type="epub"><day>30</day><month>01</month><year>2021</year></pub-date><volume>10</volume><issue>4</issue><fpage>4302</fpage><lpage>4309</lpage><permissions><copyright-statement>Copyright &amp;#x00A9; Гурина Р.В., Морозова Е.В., Кошева В.В., 2021</copyright-statement><copyright-year>2021</copyright-year><copyright-holder xml:lang="ru">Гурина Р.В., Морозова Е.В., Кошева В.В.</copyright-holder><copyright-holder xml:lang="en">Gurina R.V., Morozova E.V., Kosheva V.V.</copyright-holder><license xml:lang="ru" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>Данная работа распространяется под лицензией Creative Commons Attribution 4.0.</license-p></license><license xml:lang="en" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>This work is licensed under a Creative Commons Attribution 4.0 License.</license-p></license></permissions><self-uri xlink:href="https://profed.edubiotech.ru/jour/article/view/749">https://profed.edubiotech.ru/jour/article/view/749</self-uri><abstract><p>Ранговый анализ (ценологический подход), опирающийся на строгий математический аппарат, позволяет на научной объективной основе проводить диагностику состояния образовательных систем и процессов. В основе рангового анализа – применение закона гиперболического рангового распределения объектов в системах-ценозах, являющегося уточнённым законом Парето 20/80 (закон Парето-Кудрина). На примере использования рангового анализа в оценке валидности олимпиадных заданий всероссийской многопрофильной инженерной олимпиады «Звезда» показана необходимость внедрения рангового анализа в практику управления качеством образования. Показано, этот закон важно и целесообразно применять в управлении качеством образования. Оптимизация образовательных систем и процессов с помощью рангового анализа заключается в устранении аномальных отклонений от гиперболического закона, что возможно лишь при графической визуализации рангового распределения и его аппроксимации. График рангового распределения обеспечивает наглядность и представление о характере рангового убывания. Недочёты в содержании олимпиадных (а также тестовых) заданий, дающие ухудшение их валидности и надежности, проявляются в виде искажений гиперболического графика (горбы, впадины, хвосты, вырождение гиперболы в другие зависимости). Проводимый на научной основе, ранговый анализ позволяет объективно выделять несколько уровней валидности олимпиадных или тестовых заданий. Приведены графики ранговых распределений, иллюстрирующие примеры высокой (естественно-научное направление) и ниже средней (история) валидностей олимпиадных заданий. Образовательные системы являются ценозами, объекты ранжирования в них – учащиеся, классы, школы и т. д., а их ранжируемые параметры – это успеваемость, рейтинг в баллах, показатели эффективности и т. п. Применение несложного математического аппарата рангового анализа и компьютерных программ выводят технологии оценки качества образования на более высокий уровень, отвечающий вызовам времени.</p></abstract><trans-abstract xml:lang="en"><p>The rank analysis (cenological approach) based on a strict mathematical apparatus allows diagnosing the state of educational systems and processes on a scientific objective basis. The rank analysis base is applying the law of hyperbolic rank distribution of objects in systems-cenoses, which is a refined Pareto law 20/80 (Pareto-Kudrin law). Using of rank analysis to evaluate the validity of the olympiad tasks of the all-Russian Multidisciplinary Engineering Olympiad «Star», the authors demonstrate the necessity of implementing rank analysis in the practice of education quality management. They show that this law is important and appropriate to apply in the education quality management. Optimization of educational systems and processes using rank analysis consists in eliminating anomalous deviations from the hyperbolic law, which is possible only with graphical visualization of the rank distribution and its approximation. The rank distribution graph provides visibility and insight into the nature of the rank decrease. Shortcomings in the content of olympiad tasks (as well as tests), leading to a deterioration of their validity and reliability, are shown the form of distortions of the hyperbolic graph (humps, depressions, tails, degeneration of the hyperbola into other dependencies). The rank analysis allows identifying objectively several levels of validity of olympiad or test tasks carrying on a scientific basis. The paper demonstrates graphs of run distributions illustrating examples of high (natural science) and below the average (history) validity of olympiad tasks. Educational systems are cenoses, ranking objects in them are students, classes, schools, etc., and their ranked parameters are academic performance, rating in points, performance indicators, etc. Using simple mathematical tools of rank analysis and computer software bring the technologies to assess the education quality to a higher level meeting the challenges of the time.</p></trans-abstract><kwd-group xml:lang="ru"><kwd>ранговое распределение</kwd><kwd>ценоз</kwd><kwd>ценологический подход</kwd><kwd>управление качеством образования</kwd></kwd-group><kwd-group xml:lang="en"><kwd>rank distribution</kwd><kwd>cenosis</kwd><kwd>cenological approach</kwd><kwd>quality management of education</kwd></kwd-group></article-meta></front><back><ref-list><title>References</title><ref id="cit1"><label>1</label><citation-alternatives><mixed-citation xml:lang="ru">Гурина Р. В., Евсеев Д. А. Ранговый анализ, или ценологический подход, в методологии прикладных исследований. Ульяновск: УлГУ, 2018. 287 с.</mixed-citation><mixed-citation xml:lang="en">Gurina R. V., Evseev D. A. Rank analysis, or cenological approach, in the methodology of applied research. Ulyanovsk. UlSU, 2018, 287 p. (In Russ.)</mixed-citation></citation-alternatives></ref><ref id="cit2"><label>2</label><citation-alternatives><mixed-citation xml:lang="ru">Гурина Р. В. Ранговый анализ образовательных систем (ценологический подход): метод. рекомендации для работников образования. Москва: Технетика, 2006. 40 с.</mixed-citation><mixed-citation xml:lang="en">Gurina R. V. Rank analysis of educational systems (cenological approach): methodological recommendations for educators. Moscow, Technetika, 2006, 40 p. (In Russ.)</mixed-citation></citation-alternatives></ref><ref id="cit3"><label>3</label><citation-alternatives><mixed-citation xml:lang="ru">Гурина Р. В. Ценологические исследования педагогических образовательных систем // Ползуновский вестник. 2004. № 3. С. 133–138.</mixed-citation><mixed-citation xml:lang="en">Gurina R. V. Cenological research of pedagogical educational systems. Polzunovsky Bulletin, 2004, no. 3, pp. 133–138. (In Russ.)</mixed-citation></citation-alternatives></ref><ref id="cit4"><label>4</label><citation-alternatives><mixed-citation xml:lang="ru">Гурина Р. В. Метод рангового анализа и закон разнообразия в педагогике // Педагогический журнал Башкортостана. 2013, № 3/4. С. 111–122.</mixed-citation><mixed-citation xml:lang="en">Gurina R. V. Rank analysis method and the law of diversity in pedagogy. Pedagogical Journal of Bashkortostan, 2013, no. 3/4, pp. 111–122. (In Russ.)</mixed-citation></citation-alternatives></ref><ref id="cit5"><label>5</label><citation-alternatives><mixed-citation xml:lang="ru">Гурина Р. В., Бедаш В. В. Метод рангового анализа в управлении качеством образования // Международный журнал экспериментального образования. 2014. № 7. С. 108–111.</mixed-citation><mixed-citation xml:lang="en">Gurina R. V., Bedash V. V. Rank analysis method in education quality management. International Journal of Experimental Education, 2014, no. 7, pp. 108–111. (In Russ.)</mixed-citation></citation-alternatives></ref><ref id="cit6"><label>6</label><citation-alternatives><mixed-citation xml:lang="ru">Гурина Р. В., Бедаш В. В. Законы социальной сферы // Евразийский Союз учёных. 2014. № 8. С. 16–20.</mixed-citation><mixed-citation xml:lang="en">Gurina R. V., Bedash V. V. Laws of the social sphere. Eurasian Union of Scientists, 2014, no. 8, pp. 16–20. (In Russ.)</mixed-citation></citation-alternatives></ref><ref id="cit7"><label>7</label><citation-alternatives><mixed-citation xml:lang="ru">Гурина Р. В., Морозова Е. В. Ценология – учение о ценозах разной природы // Образовательные технологии. 2020. № 1. С. 40–49.</mixed-citation><mixed-citation xml:lang="en">Gurina R. V., Morozova E. V. Cenology is the doctrine of cenoses of different nature. Educational Technologies, 2020, no. 1, pp. 40–49. (In Russ.)</mixed-citation></citation-alternatives></ref><ref id="cit8"><label>8</label><citation-alternatives><mixed-citation xml:lang="ru">Кох Р. Закон Парето или принцип 80/20 // Общая и прикладная ценология. 2007. № 4. С. 76–79.</mixed-citation><mixed-citation xml:lang="en">Koch R. Pareto's law or 80/20 principle. General and Applied Cenology, 2007, no. 4, pp. 76–79. (In Russ.)</mixed-citation></citation-alternatives></ref><ref id="cit9"><label>9</label><citation-alternatives><mixed-citation xml:lang="ru">Любищев А. А. Расцвет и упадок цивилизаций (предварительный набросок). Ульяновск; Самара, 1993. 131 с.</mixed-citation><mixed-citation xml:lang="en">Lyubischev A. A. Rise and fall of civilizations: (a preliminary sketch). Ulyanovsk, Samara, 1993, 131 p. (In Russ.)</mixed-citation></citation-alternatives></ref></ref-list><fn-group><fn fn-type="conflict"><p>The authors declare that there are no conflicts of interest present.</p></fn></fn-group></back></article>
