Система электронного мониторинга состояния и развития образовательных систем Московской области Фирсова Анна Владимировна, начальник отдела мониторинга и статистики образования ЦКО ГБОУ ВПО МО АСОУ Московская область Региональная система сопровождения электронного мониторинга • • • • • • • • Региональные кураторы территорий Постоянно действующий обучающий семинар Горячая линия Анализ основных ошибок при работе с отчетами ЭМ Комплекс инструктивных материалов для операторов и координаторов РСЭМ Ежедневные консультации в режиме on-line Рейтинг соблюдения муниципальными операторами РСЭМ графика и достоверности заполнения электронных таблиц (информация на сайте сопровождения в режиме on-line) Оперативное и конструктивное взаимодействие с федеральным оператором Отличие от федеральной МосковскаяРСЭМ область системы ЭМ ННШ и МРСО • На федеральном уровне ведется только контроль выполнения различных показателей хода модернизации образования • РСЭМ – инструмент управления, позволяющий на основе единого информационного пространства (методики, инструментария, технологий и т.д.), проводить анализ результатов модернизации различных образовательных систем для принятия дальнейших управляющих решений Московская область Задачи РСЭМ 1. Создание инструмента управления качеством образования на основе индикаторов и показателей результативности школьных, муниципальных и региональной образовательных систем Московской области 2. Формирование рейтингов муниципалитетов и ОУ по разным аспектам деятельности системы образования региона 3. Сокращение документооборота, оптимизация информационных потоков 4. Обеспечение открытости образовательного процесса в регионе Московская область Описание РСЭМ • Объем показателей в РСЭМ не ограничен • Возможность формирования и корректировки разработанных форм и отчетов позволяет интегрировать в систему различные комплексные и тематические мониторинговые исследования, а так же опросы, анкетирования и пр. • Первичные данные, заносимые в реестр, разбиваются на блоки - совокупности показателей определяющих качество образования в различных его аспектах. Каждому блоку соответствует свой набор показателей. Блоки различаются между собой тематикой данных, периодичностью их сбора, вариантами использования содержащейся в том или ином блоке информации, а так же уровнем образовательных структур, предоставляющих данные для этих блоков Московская область Описание РСЭМ Основные блоки модуля общеобразовательных учреждений: •Общие сведения •Контингент •Кадровый потенциал •Инновационная деятельность •Информационно-техническое оснащение •Здоровье •Организация питания •Результат обучения (внутренняя и внешняя оценка) •Работа с одаренными обучающимися •Финансы •Социализация Технические возможности РСЭМ • Управление учетными записями операторов системы – создание и редактирование учетных записей операторов системы различных уровней, назначение прав доступа, направлений деятельности, привязка к учреждениям / уровням, контактная информация и др. • Конструктор таблиц – быстрое создание структур таблиц путем конструирования вручную либо импорта из данных MS Excel. • Система проверки вводимых данных, защита от ошибок при заполнении. • Управление таблицами – выставление созданных структур для заполнения в кабинеты операторов системы различных уровней на определенные периоды времени (согласно регламенту сбора данных). • Расчет и управление данными. • Отчеты – формирование и сохранение структур отчетов на основе данных системы с возможностью выбора любых необходимых полей из имеющихся таблиц, использования любых условий и фильтров для каждого поля. • Вывод объектов, соответствующих заданным условиям и данных по выбранным полям. • Рейтинги – построение публичных рейтингов по заданным методикам, таким, как кластерная модель и т. п. Московская область Возможности РСЭМ В настоящее время в РСЭМ собирается, обрабатывается и анализируется: •более 1000 первичных и расчетных показателей с уровня общеобразовательных учреждений и муниципалитетов Московской области •более 100 показателей дошкольных образовательных учреждений с муниципального уровня (в режиме апробации) Московская область Возможности РСЭМ Модуль «Аналитика» РСЭМ позволяет проводить: •сравнительный анализ образовательных учреждений муниципалитетов по широкому спектру показателей и •динамический анализ показателей за определенные временные отрезки •кластерный анализ оценки состояния и развития муниципальных и школьных образовательных систем •формирование отчетов в режиме on-line по запросам различных ведомств Московская область Возможности РСЭМ Наличие единой базы данных системы электронного мониторинга позволяет формировать: •линейные рейтинги по всем аспектам функционирования системы общего образования региона •сложные рейтинги по любому набору показателей, характеризующих различные направления деятельности образовательных систем всех уровней •публичные рейтинги по заданным методикам Московская область Результаты внедрения РСЭМ • Широкий спектр возможностей по сбору, хранению, обработке, анализу и предоставлению неограниченного количества показателей различных направлений по всем типам образовательных учреждений Московской области • Создание единого информационного пространства (методики, инструментарий, технологии и т.д.), обеспечивающего в режиме on-line полноту данных для характеристики образовательных систем и принятия управляющих решений • Возможность проводить анализ и отслеживать динамику показателей, выявлять проблемы, принимать необходимые управленческие решения на разных уровнях, а так же отслеживать последствия принятых решений • Возможность проводить выборочные и сплошные опросы по разным аспектам функционирования системы образования Московская область На базе информации РСЭМ с помощью уникального инструментария, разработанного Центром качества образования ГБОУ ВПО МО АСОУ на основе методики кластеризации проводится: • ежегодная оценка состояния и развития школьных и муниципальных образовательных систем • рейтингование школ и муниципалитетов по интегральным показателям организации образовательного процесса и результата обучения • оценка доступности качественного образования в разрезе школ и муниципалитетов (определение высоты барьеров доступности качественного образования) Московская область Результаты внедрения РСЭМ Обеспечение 87% информационных запросов региона через РСЭМ (сокращение запросов непосредственно в школы и муниципалитеты) Московская область Возможности аналитики в РСЭМ Московская область Использование метода кластеризации для управления качеством образования Исследуя систему образования, можно выделить несколько наиболее распространенных (типичных) разновидностей образовательных систем, обладающих определенными сочетаниями признаков (качеств), выраженных в высокой степени Московская область Методика кластеризации МОС и ОУ В основе кластерной модели лежит призна е того факта, что образовательный результат зависит от качества созданных условий и уровня организации образовательного процесса, поэтому кластерная модель предполагает измерение, изучение, диагностику условий образовательного процесса организации образовательного процесса результата образовательного процесса Сущность методики – распределение (кластеризация) образовательных систем (ОУ, МОС и др.) по группам (кластерам), которые характеризуются определенным набором значений показателей условий, процесса и результата образования, дальнейший анализ причин попадания образовательной системы в тот или иной кластер. Московская область Основные этапы оценки состояния образовательных систем 1) Формирование комплекса показателей для оценки состояния образовательных систем (условия, процесс, результаты) 2) Сбор и обработка первичной информации 3) Кластеризация (группировка) образовательных систем по показателям качества условий/процесса и результата 4) Анализ морфологии кластеров 5) Сравнительный и проблемный образовательных систем 6) Разработка управленческих решений анализ состояния Московская область 1) Формирование комплекса показателей для оценки состояния образовательных систем (условия, процесс, результаты) Сбор информации осуществляется по 11 направлениям, характеризующим состояние образовательных систем (условия, процесс, результаты) •Сведения об общеобразовательном учреждении и его учащихся. •Сведения о кадровом обеспечении •Сохранение и укрепление здоровья учащихся •Организация образовательного процесса •Обучение по программам повышенного уровня •Дополнительные предметы, расширяющие образовательные области •Условия образовательного процесса •Информационно-техническое оснащение •Результат обучения (внутренняя оценка) •Результат обучения (независимая оценка) •Финансовые показатели Московская область 2) Сбор и обработка первичной информации • агрегирование данных первичной информации в показатели; • распределение показателей по блокам. характеризующим условия/процесс и результат; • определение сводных индексов блоков показателей; • присвоение весовых баллов сводным индексам показателей (возможно с учетом приоритетных направлений развития системы образования Московской области) Московская область 3) Кластеризация (группировка) образовательных систем по показателям качества условий/процесса и результата • расчет интегральных показателей «качества условий и процесса» (Ipr) и «качества результата» (Ir); • определение границ интервалов оценки состояния образовательных систем по шкалам интегральных показателей «качества условий и процесса» (Ipr) и «качества результата» (Ir); • кластеризация образовательных систем (скрещивание интервалов шкал интегральных показателей Ipr и Ir); Московская область Интервалы шкал сводных индексов (Ipr и Ir) для проведения кластеризации Шкала значений сводных индексов разбивается на 4 группы (квартили) Низкий результат Imin Средний результат Высокий результат Первая квартиль Вторая квартиль Третья квартиль Четвертая квартиль Imax Московская область Кластерная модель Ir Ipr 1 2 3 4 1 1 2 3 4 2 5 6 7 8 3 9 10 11 12 4 13 14 15 16 Московская область Представление результатов Ниже среднего Ниже среднего 1pr 1r 2r 3r 1 2 3 1 5 2 (1.37% ) (6.85% ) (2.74% ) 5 2pr Средний уровень Средний уровень 3 6 7 9 11 (12.33% ) (15.07% ) (4.11% ) 3pr 9 Выше среднего Всего 4r МОС 8 8 3 26 (4.11% ) 10 11 11 17 (15.07% ) (23.29% ) 12 5 33 (6.85% ) Выше среднего 4pr Всего МОС 13 4 14 15 16 1 2 3 (1.37% ) (2.74% ) (4.11% ) 26 32 11 6 Московская область Представление результатов Интегральный показатель результата Интегральный показатель организации образовательного процесса 6118 - МБОУ Гимназия № 9 г. Химки 46,53492064 23,35550082 3610 - МБОУ Апрелевская СОШ №4 46,57413793 23,35299626 Наименование ОУ 6121 - МБОУ Гимназия № 23 г.Химки 46,5242636 23,35259104 5408 - МОУ СОШ № 9 СУИОП 46,62790698 23,35174658 3510 - МБОУ СОШ №28 6401 - МБОУ СОШ СУИОП № 1 г. Шатуры Шатурского муниципального района 3311 - МОУ Гимназия №24 46,98148148 23,34732665 46,58164983 13,34297389 46,60231769 13,32932651 1017 - МОУ Михалевская СОШ 46,64285714 13,30952381 Московская область Представление результатов I pr1 Муниципалитет P1 P2 P3 P4 Показатели P5 P6 P7 P8 P9 P10 P11 P12 P13 M1 M23 M3 M4 M5 Г16 M7 M18 Г9 0,54 1,64 1,74 1,01 0,18 1,05 1,50 1,01 1,05 0,37 1,06 0,57 1,03 0,25 0,21 1,07 0,83 1,82 4,02 0,78 1,01 1,05 1,22 1,51 0,26 0,76 0,31 0,67 1,36 1,30 1,47 0,76 0,14 0,21 0,18 1,39 1,07 1,07 0,97 0,86 0,91 0,98 0,94 0,96 0,92 0,86 1,07 1,40 0,24 0,34 0,78 1,40 0,69 1,35 1,15 0,81 0,86 0,98 1,21 1,01 1,05 1,22 0,84 0,81 1,57 0,99 1,13 1,21 0,51 0,39 1,61 0,81 1,01 1,05 0,83 0,46 0,60 0,52 0,59 1,13 1,05 0,77 0,65 1,72 0,35 1,01 0,90 0,52 1,26 0,69 1,12 0,73 1,11 1,61 0,46 0,99 1,01 0,77 1,01 1,05 1,00 1,49 0,37 1,45 0,73 2,27 1,68 0,25 1,82 0,77 0,76 1,01 1,05 0,69 1,51 0,18 1,57 12,76 14,82 10,38 12,20 13,55 11,13 11,77 13,06 14,31 Московская область Обучение кадров Разработаны • Учебно-методические материалы для целевого повышения квалификации управленческих кадров «Мониторинг достижения промежуточных и итоговых результатов КПМО» • Программы специальной подготовки и инструктивные материалы «Организационное, методическое и информационное обеспечение и сопровождение мониторинга РКПМО» для муниципальных и школьных команд • Программа специальной подготовки «Организационное, методическое и информационное обеспечение и сопровождение РСЭМ» для муниципальных и школьных операторов (72 часа) • Программа специальной подготовки «Формирование аналитического потенциала управленцев МО» (с использованием аналитического кабинета РСЭМ) (72 часа) Обучены: • 72 муниципальных координатора ЭМ • 72 муниципальных оператора • Более 2тысяч школьных координаторов и операторов ЭМ Московская область Спасибо за внимание Отдел мониторинга и статистики Центра качества образования Московской области ГОУ ВПО МО «Академия социального управления» [email protected] [email protected]