Translate this page:
Please select your language to translate the article


You can just close the window to don't translate
Library
Your profile

Back to contents

Cybernetics and programming
Reference:

Approach to integrated assessment of quality of educational institutions on the basis of the adapted methodology for assessing the effectiveness bodies of executive power subjects of the Russian Federation

Fatkhullin Robert Rifovich

PhD in Technical Science

graduate student, Department of Applied Mathematics and Informatics, Mari State University

424000, Russia, respublika Marii El, g. Ioshkar-Ola, pl. Lenina, 1

robertooo1990@gmail.com
Other publications by this author
 

 

DOI:

10.7256/2306-4196.2015.5.16941

Received:

09-11-2015


Published:

27-11-2015


Abstract: One of the leading trends in the development of education in the world at present is the creation of a comprehensive quality assessment of education. In quality assessment of education we are faced with a huge number of different indicators, each of which can consist of a variety other indicators. Accordingly, the task of quality assessment of education in its mathematical formulation is multiobjective. With high rates of development educational standards, the number of such problems is growing. Today is actively developing an approach to the determination of the quality education, study various aspects, indicators and indices. Comprehensive assessment of the effectiveness educational institutions is a multi-criteria task for which you want to set the criteria and procedure for evaluation. For a comprehensive evaluation of educational institutions is considered an approach based on an adapted methodology for assessing the effectiveness of the bodies of executive power, approved by the Russian Government. In implementing these models can grow such important qualitative indicators of a comprehensive assessment of the effectiveness quality educational institutions as an objective assessment, scalability, simplicity and ease of use. The results can be widely used in a comprehensive quality assessment of education in the region at different levels and types of educational institutions.


Keywords:

assessment of the quality of education, comprehensive quality assessment, multi-criteria optimization, performance evaluation, convolution of criteria, quality indicators, quality of work, adapted method of valuation, assessment of executive power, quality criteria


Введение

Проблемой современного этапа развития региональной системы оценки качества образования, является недостаточная целостность и сбалансированность системы процедур и механизмов оценки качества образования, что затрудняет принятие эффективных управленческих решений, не позволяет добиваться эффективности принимаемых мер. Оценка качества регионального образования предполагает оценку образовательных объектов. Под образовательными объектами понимаются образовательные организации (ОО) различных типов: дошкольные, общеобразовательные организации, организации дополнительного и профессионального образования.

Комплексное оценивание качества деятельности ОО в регионе производится на основе проведенных мониторинговых исследований по трем направлениям: качество основных условий, качество реализации образовательного процесса, качество результатов. Каждый мониторинг состоит из множества индикаторов. Образовательный индикатор – это вычисляемый или измеряемый показатель, который характеризует качество образовательной деятельности организации, усилия властей, направленные на поддержание или улучшение ее состояния, отражающий степень достижения целевых значений образовательных индикаторов.

Модель оценки качества деятельности образовательных организаций

Для расчета комплексной оценки качества деятельности ОО используем адаптированную методику, утвержденной Постановление Правительства Российской Федерации [3]. В рамках данной методики рассчитывается показатель (`K` ) комплексной эффективности деятельности органов исполнительной власти муниципальных образований, который определяется значениями трех сводных показателей: сводного индекса показателя эффективности (`Ip` ), индекса среднего темпа роста показателя эффективности (`Ist` ), индекса среднего объема показателя эффективности (`Iso` ). В нашем случае попробуем применить данную методику на региональную образовательную систему. В качестве органов исполнительной власти будут выступать ОО.

Расчет оценки эффективности деятельности осуществляется поэтапно. На первом этапе проводится выбор и анализ показателей эффективности, и их нормирование [2]. Определяются базовые и дополнительные показатели. На втором этапе аналитической работы проводится сравнительная оценка нормированных значений показателей и расчет значений среднего объема `O_(i)=(P_(j)+P_(j-1)+P_(j-2))/(3)` и среднего темпа роста `T_(i)=root(3)(((P_(j))/(P_(j-1))) * ((P_(j-1))/(P_(j-2))))`, где `P_(j), P_(j-1), P_(j-2) > 0`, где `P_(j)` - значение показателя эффективности деятельности за отчетный год; `P_(j-1)` - значение показателя эффективности деятельности за год, предшествующий отчетному; `P_(j-2)` - значение показателя эффективности деятельности за год, предшествующий на два года отчетному.

В частных случаях, если какие-либо данные по ОО отсутствуют или равны нулю, то для расчета среднего темпа роста ( `T` ) воспользуемся следующими формулами:

    • если `P_(j)=0`, при любых значениях `P_(j-1),P_(j-2),P_(j-3)`, то `T_(j)=0`;
    • если `P_(j-1)=0, P_(j)>0, P_(j-2)>0`, то `T_(j)=root(P_(j)/P_(j-2))`;
    • если `P_(j-2)=0, P_(j)>0, P_(j-1)>0`, то `T_(j)=root(P_(j)/P_(j-1))`;
    • если `P_(j-2)=0, P_(j-1)=0, P_(j)>0`, то `T_(j)=1`.

Далее рассчитывается индекс среднего темпа роста `Ist_(i)=(T_(i)-T^(min))/(T^(max)-T^(min))` (в отношении индекса показателя, большее значения которого отражает меньшую эффективность `Ist_(i)=(T^(max)-T_(i))/(T^(max)-T^(min))`), где `T_(i)` - значение среднего темпа роста i-го показателя качества деятельности за отчетный год и два года предшествующие отчетному; `T^(min)` - минимальное значение среднего темпа роста показателя качества деятельности за отчетный год и два года, предшествующие отчетному; `T^(max)` - максимальное значение среднего темпа роста показателя качества деятельности за отчетный год и два года, предшествующие отчетному.

Рассчитывается средний объем `Iso_(i)=(O_(i)-O^(min))/(O^(max)-O^(min))` (в отношении индекса показателя, большее значения которого отражает меньшую эффективность по формуле `Iso_(i)=(O^(max)-O_(i))/(O^(max)-O^(min))`) по показателям эффективности деятельности за текущий год и два года предшествующие ему, где `O_(i)` - значение среднего объема роста показателя качества деятельности; `O^(min)` - минимальное значение среднего объема роста показателя качества деятельности; `O^(max)` - максимальное значение среднего объема роста показателя качества деятельности.

На третьем этапе производится расчет сводного индекса по базовым показателям `Ip_(i)=0,8*Ist_(i)+0,2*Iso_(i)`, где `Ist` - индекс среднего темпа роста показателя качества; `Iso` - индекс среднего объема роста показателя качества. Аналогично рассчитывается сводный индекс по дополнительным показателям.

Комплексная оценка качества деятельности ОО определяется по формуле [3] `K=0,8*((1/n)*sum_(i=1)^n Ip_(i) ) + 0,2*((1/m)*sum_(i=1)^m Is_(i))`, где `Ip` - сводный индекс значения показателя качества деятельности ОО по базовым показателям; `Is` - сводный индекс значения показателя качества деятельности ОО по дополнительным показателям; `n,m` - количество базовых и дополнительных показателей соответственно.

Результаты моделирования реализованы на примере модели комплексной оценке качества деятельности общеобразовательных организаций.
Произведем расчет комплексных показателей на примере трех ОО. Например, имеются показатели оценки результативности деятельности и показатели деятельности ОО подлежащей самообследованию [4]. Выберем из данных мониторингов базовые и дополнительные показатели. Пронормировав показатели (табл. 1, 2), рассчитаем комплексную оценку ОО.

Таблица 1

Базовые показатели качества деятельности общеобразовательной организации

Показатель Нормированные значения показателей
Образовательная организация
ОО 2 ОО 2 ОО 3
За отчетный год За 1 год За 2 год За отчетный год За 1 год За 2 год За отчетный год За 1 год За 2 год
Численность педагогических работников, имеющих высшее образование педагогической направленности (профиля) 0,414 0,346 0,682 0,432 0,477

,261

0

0,759 0,55 0,687
Численность детей, обучающихся в соответствии с федеральным государственным образовательным стандартом 0,189 0,201 0,690 0,158 0,432 0,573 0,945 0,32 0,143
Количество кабинетов для учащихся начальных классов, обучающихся по ФГОС 0,095 0,395 0,116 0,383 0,456 0,442 0,752 0,868 0,302
Количество кабинетов для учащихся начальных классов, обучающихся по ФГОС, которые обеспечены интерактивным комплектом 0,922 0,207 0,466 0,383 0,383 0,158 0,408 0,716 0,663
Средний балл по результатам ЕГЭ 11 класс по русскому языку 0,548 0,853 0,794 0,250 0,358 0,323 0,392 0,677 0,314
Средний балл по результатам ЕГЭ 11 класс по математике 0,410 0,419 0,44 0,573 0,458 0,456 0,529 0,3 0,862
Средний балл по результатам ГИА 9 класс по русскому языку 0,775 0,452 0,435 0,452 0,124 0,323 0,937 0,148 0,783
Средний балл по результатам ГИА 9 класс по математике 0,573 0,158 0,372 0,451 0,158 0,163 0,811 0,904 0,38
Численность выпускников 11 класса, не получивших аттестаты о среднем общем образовании 0,528 0,368 0,234 0,573 0,485 0,754 0,845 0,378 0,93
Численность выпускников 9 класса, не получивших аттестаты об основном общем образовании 0,057 0,627 0,797 0,758 0,124 0,724 0,788 0,034 0,119

Таблица 2

Дополнительные показатели качества деятельности общеобразовательной организации

Показатель Нормированные значения показателей
Образовательная организация
ОО 2 ОО 2 ОО 3
За отчетный год За 1 год За 2 год За отчетный год За 1 год За 2 год За отчетный год За 1 год За 2 год
Численность детей, которым обеспечена возможность пользоваться современно оборудованными актовыми залами 0,89 0,6601 0,382 0,901 0,899 0,323 0,697 0,307 0,477
Наличие доступа в сеть Интернет с использованием технологии Wi-Fi 0,982 0,542 0,448 0,935 0,575 0,421 0,977 0,077 0,611
Использование дистанционных образовательных технологий 0,323 0,958 0,41 0,231 0,234 0,283 0,029 0,5 0,36
Численность выпускников, зачисленных на бюджетные места в государственные вузы от общего числа выпускников 0,589 0,401 0,69 0,42 0,445 0,343 0,56 0,478 0,778
Численность обучающихся, ставших призёрами и победителями научных и научно-практических конференций 0,595 0,395 0,116 0,775 0,391 0,542 0,842 0,399 0,823

Для каждого показателя качества рассчитаем индекс среднего темпа роста (`Ist` ), индекс среднего объема (`Iso` ) и сводный индекс (`Ip` ) индикатора эффективности деятельности по данным в таблицах 1 и 2. Далее вычислим комплексную оценку качества деятельности для каждой ОО. Получим `K_(1)=0,347` ; `K_(2)=0,374` ; `K_(3)=0,427` .

По степени отклонения комплексной оценки (`K` ) от среднего значения, организации в кластере [1] ранжируются по уровням достижения:

  • высокой оценки качества деятельности;

  • средней оценки качества деятельности;

  • низкой оценки качества деятельности.

Среднее значения в кластере `K_(avg)=0,382` . Следовательно ранг ОО1 – средняя оценка качества деятельности, ОО2 – средняя оценка качества деятельности, ОО3 – высокая оценка качества деятельности.

Данный подход отличается от подходов рассмотренных в [2] тем, что не требуется знания весовых коэффициентов показателей, что облегчает процесс расчета комплексной оценки эффективности деятельности ОО.

` `

Заключение

Таким образом, в статье исследован подход к оценке эффективности деятельности ОО. Доказано, что данный подход, основанный на адаптированной методике оценки [3], может использоваться для расчета комплексной оценки эффективности деятельности ОО в регионе. Проведены расчеты комплексных показателей качества деятельности ОО на примере общеобразовательных организации, при помощи данного подхода с использованием методов многокритериальной оптимизации [2]. Рассчитанные комплексные оценки показывают что, ОО3 имеет высокий уровень качества образовательной деятельности относительно двух других ОО.

Для расчета комплексных оценок используются результаты мониторинговых исследований, показатели которых являются унифицированными. Мониторинги проводятся ежегодно на всех уровнях образования и практически во всех регионах Российской Федерации. Таким образом, данный подход универсален и может использоваться не зависимо от региона и уровня образования.

References
1. Fatkhullin R.R. Topometrika skhodstva obrazovatel'nykh ob''ektov / R.R. Fatkhullin // Elektronnoe obuchenie v nepreryvnom obrazovanii 2015. II Mezhdunarodnaya nauchno-prakticheskaya konferentsiya: sbornik nauchnykh trudov. – Ul'yanovsk : UlGTU, 2015. – T.2. – S. 170-174.
2. Fatkhullin R.R., Metody stokhasticheskoi optimizatsii pri otsenke kachestva deyatel'nosti obrazovatel'nykh organizatsii / R.R. Fatkhullin, I.G. Sidorkina // Vestnik chuvashskogo universiteta: ChGU im. I.N. Ul'yanova – Cheboksary, 2015. – Vyp. 1. – S. 213-221.
3. O merakh po realizatsii Ukaza Prezidenta Rossiiskoi Federatsii ot 21 avgusta 2012 g. N 1199 «Ob otsenke effektivnosti deyatel'nosti organov ispolnitel'noi vlasti sub''ektov Rossiiskoi Federatsii» // Rossiiskaya gazeta. «RG-Biznes» №874 – 2012. – 27 noyab.
4. Ob utverzhdenii pokazatelei deyatel'nosti obrazovatel'noi organizatsii, podlezhashchei samoobsledovaniyu: prikaz Ministerstva obrazovaniya i nauki RF ot 28 yanvarya 2014 g. №1324 // Rossiiskaya gazeta. Federal'nyi vypusk №6310 – 2014. – 19 fev.