Отчет по II этапу Государственного контракта Москва 2012 Исполнитель:
advertisement
Отчет по II этапу Государственного контракта от 14 сентября 2011 г. № 03.P20.11.0048 Москва 2012 Исполнитель: Общество с ограниченной ответственностью «Оценка качества образования» Проект 07.02-021-п-Ф-80 «Экспертно-методологическое сопровождение реализации мероприятий по разработке, апробации и внедрению моделей независимой системы оценки результатов дошкольного, профессионального и дополнительного образования» Цель проекта – повышение эффективности разработки и качества внедрения моделей независимой системы оценки результатов дошкольного, профессионального и дополнительного образования. Исполнитель – Общество с ограниченной ответственностью «Оценка качества образования» (Государственный контракт от 14 сентября 2011 г. № 03.P20.11.0048) Проект спланирован на 3 года (2011-2013) и выполняется в 3 этапа. 1 этап – 2011 год 2 этап – 2012 год 3 этап – 2013 год ЗАДАЧИ ЭТАПА 1. Доработка методологии системного подхода и инструментария для исследования хода реализации мероприятий по разработке, апробации и внедрению моделей независимой системы оценки результатов дошкольного, профессионального и дополнительного образования. 2. Проведение исследований хода реализации мероприятий по разработке, апробации и внедрению моделей независимой системы оценки результатов дошкольного, профессионального и дополнительного образования на федеральном уровне и уровне субъектов Российской Федерации. 3. Проведение в субъектах Российской Федерации тематических исследований по вопросам внедрения моделей независимой системы оценки результатов дошкольного, профессионального и дополнительного образования среди представителей всех целевых аудиторий. 4. Подготовка информационных и аналитических материалов на основании проведенных исследований. 5. Разработка методических рекомендаций по корректировке структуры и содержания подмероприятия 7.2 ФЦПРО. 6. Проведение профессионального обсуждения достигнутых результатов реализации подмероприятия 7.2 ФЦПРО в текущем году и формирование предложений (установок) на следующий год. II.1.1. Доработка методологии системного подхода и инструментария для исследования хода реализации мероприятий по разработке, апробации и внедрению моделей независимой системы оценки результатов (НСОР) образования А) основные положения системного подхода к оценке эффективности мероприятий: - система критериев оценки и измерителей запланированных и достигнутых уровней выполнения задач по внедрению моделей; - предложения по обеспечению единого комплексного подхода к проведению мониторинговых исследований хода реализации мероприятий; - механизмы привлечения к исследованию экспертных групп; - основные направления совершенствования моделей НСОР. Б) инструментарий для проведения исследований хода реализации мероприятий Доработанные направления совершенствования моделей Сравнение «до» и «после»: ◦ ◦ ◦ ◦ ◦ ◦ Накопление и лонгитюдный анализ данных. Проработка каналов обратной связи и методов улучшения модели. ◦ ◦ ◦ ◦ Статистика подготовленности и успеваемости учеников. Показатели успешной работы преподавателей – количество часов, затраченных на непосредственно обучение, контакт с учениками вне классного времени, работы по повышению квалификации, слежение за литературой в предметной области и др. Уровень материальной базы (здания, площадки вокруг зданий, количество комнат и плотность людей, техническая база и проч.). Уровни удовлетворенности потребителей результатов образования и персонала. Использование стандартов образования для данной отрасли образования (ДО, ПО, ДопО) в виде рубрик, методических указаний, системы оценивания прогресса и успеваемости и др. Показатели эффективности финансирования обучения лиц. Взаимодействие и обмен информацией между всеми субъектами МНСОР. Открытость – наличие всей документации по разработке, апробации и внедрению МНСОР в публичном доступе и прозрачные механизмы документальной проверки. Публичное сопоставление запланированных и достигнутых уровней функционирования образовательной системы (по оценкам, по уровням удовлетворенности, по соответствию образовательным и техническим стандартам, и проч.) Сбор и распространение качественной и количественной информации о работе модели через СМИ, социальные медиа и экспертов. Публикация данных. Критерии оценки уровня выполнения задач Модели независимой оценки результатов образования •качество приемного / вступительного процесса •качество основной образовательной программы •качество дополнительных образовательных программ •степень соответствия результатов образовательного процесса требованиям рынка труда •использование современных образовательных концепций •уровень квалифицированности преподавательского и педагогического состава •качество управленческих процессов •качество процессов планирования и финансирования •степень оснащенности информационными технологиями •степень материально-технической оснащенности •качество и интенсивность научной работы •─//─ воспитательной и просветительской деятельности •─//─ экспертно-консультационной деятельности преподавательского и педагогического состава ОЦЕНИВАЕМЫЕ МЕРОПРИЯТИЯ Критерии оценки: 1. Образовательная составляющая 2. Организационная составляющая 3. Научно-исследовательская и воспитательная составляющая 4. Учет мнения всех заинтересованных сторон; оценка механизма обратной связи 5. Учет мировых и российских подходов к независимой оценке результатов образования 6. Ясность/понятность, прозрачность/открытость, простота 7. Доступность для всех заинтересованных сторон 8. Степень апробированности и внедренности 9. Экономическая эффективность мероприятий Механизм привлечения экспертных групп Экспертный пул консенсусное определение экспертных коэффициентов индивидуальное заполнение карт первичной оценки Первичные экспертные оценки * Экспертные коэффициенты значимости критериев взвешивание и интегрализация ИНТЕГРАЛЬНАЯ ОЦЕНКА МОДЕЛИ Инструментарий для исследования эффективности разработки, апробации и внедрения моделей НСОКО Скринер Респонденты ЭКСПЕРТЫ Информация об эксперте Оценка модели Описание модели Количественные параметры модели Оценка эффективности разработки, апробации и внедрения модели Оценка эффективности комплексной оценки обучающегося механизмов достижений Оценка эффективности технологии и методики подготовки и проведения процедур контроля и оценки качества образования ОЦЕНКА ЭФФЕКТИВНОСТИ МОДЕЛИ НЕЗАВИСИМОЙ СИСТЕМЫ ОЦЕНКИ КАЧЕСТВА ОБРАЗОВАНИЯ Инструментарий для исследования восприятия моделей НСОКО Скринер Информация о респонденте Описание модели Оценка степени разработки, внедрения модели апробации и Оценка восприятия модели Оценка тенденций, прогноза внедрения моделей и рисков Показатель 1.1: Количественная оценка модели независимой оценки качества образования – наличие в модели необходимых составляющих, их количественное выражение Показатель 1.2: Оценка эффективности модели с точки зрения разработки, апробации и внедрения Показатель 1.3: Оценка эффективности модели с точки зрения механизмов комплексной оценки академических достижений обучающегося, его компетенций и способностей Показатель 1.4: Оценка эффективности модели с точки зрения технологии и методики подготовки и проведения процедур контроля и оценки качества образования ЭФФЕКТИВНОСТЬ Показатель 2.1: Полнота восприятия модели независимой оценки качества образования, ее соответствие ожиданиям респондента Показатель 2.2: Оценка тенденций, прогноза и рисков внедрения моделей ВОСПРИЯТИЕ Анализ результатов исследования базируется на 6 показателях II.2.1. Проведение в 2012 году исследований хода реализации мероприятий по разработке, апробации и внедрению моделей независимой системы оценки результатов дошкольного, профессионального и дополнительного образования на уровне субъектов Российской Федерации Организационная схема проведения исследования Этап 1. Формирование рабочей групп по выполнению исследований Этап 2 . Проведение исследований в форме опроса Создание рабочей группы по разработке материалов, проведению опроса и обработке результатов 1. Отбор респондентов, равномерно представляющих уровни образования, в соответствии с выделенными критериями 2. Проведение опроса 3. Отбор исследуемых регионов (5 регионов в 8 федеральных округах) Этап 3. Обработка результатов опроса Этап 4. Анализ полученных результатов Этап 5. Подготовка аналитического отчета о ходе реализации мероприятий математико-статистический анализ данных социологического опроса с использованием компьютерных методов обработки данных качественный анализ и обобщение эмпирических данных по 4 уровням образования обобщение результатов количественного и качественного анализа Организационная схема проведения исследования Для обеспечения надежности заполнения анкет респондентами в субъектах Российской Федерации организована функциональность заполнения в электронном виде на официальном сайте ФЦПРО http://www.fcpro.ru/ II.2.2. Формирование экспертных групп для проведения экспертизы реализации мероприятий Оценка подтверждающих документов: соответствие профильного образования эксперта тематике проводимых исследований; ученая степень; ученое звание; должностное положение; стаж научной или практической работы в определённой сфере; количество публикаций по тематике моделей за последние три года; цитируемость эксперта; компетентностный уровень экспертной оценки; количество сформированных экспертных заключений; квалификация эксперта; признанность эксперта Косвенный анализ (собеседование, пробное заключение): высокий уровень общей эрудиции; наличие академического научного интереса к оцениваемым проблемным вопросам; наличие опыта в оцениваемой области знаний; принципиальность; объективность; способность творчески мыслить; интуиция 3 группы экспертов по уровню образования (ДО - 13, ПО - 18, ДопО - 18) II.2.3. Проведение экспертизы реализации мероприятий по разработке, апробации и внедрению моделей независимой системы оценки результатов дошкольного, профессионального и дополнительного образования на федеральном и региональных уровнях Оценка федеральных моделей по критериям: Экспертная оценка степени выполнения контракта Соответствие фактических сроков плановым Соблюдение видов и объемов отчетных материалов Оценка охватных показателей мероприятия Соответствие результатов работ современному уровню знаний Экспертная оценка качества выполнения работ Регистрация ОИС Соответствие результатов положениям законодательства РФ, требованиям образовательных стандартов Степень использования современных ИКТ Степень распространения информации в СМИ Экспертная оценка полученных результатов Степень привлечения к экспертизе (апробации) моделей широкого круга участников Степень комплексности подхода к разработке моделей Оценка уровня апробации и общественного признания результатов Оценка практической значимости работы Оценка качества оформления итогового отчета Оценка региональных моделей по критериям: Степень актуальности и решаемый масштаб проблем Степень новизны модели Уровень локализации модели Широта, масштабы внедрения модели Степень выполнимости (реализуемости) Степень мультиплицируемости и настраиваемости / Уровень адаптивности Степень модифицируемости Степень отторжимости / Уровень устойчивости Уровень социальной доступности результатов реализации модели Потенциальный уровень потребности в результатах Уровень социально-экономической значимости Степень подконтрольности Уровень коммуникационной эффективности Уровень эффективности управления модели II.3.1. Проведение в субъектах Российской Федерации тематических исследований по теме «Особенности восприятия новых моделей системы оценки качества дошкольного, начального профессионального, среднего профессионального, высшего профессионального, послевузовского профессионального и дополнительного образования» среди представителей всех целевых аудиторий Проведены исследования в 60 субъектах Российской Федерации (не менее 200 респондентов в каждом субъекте, всего 12 597 участников) Разработаны отчетные материалы по итогам исследования, в которых выявляются достоинства и недостатки применяемых моделей по 6 уровням образования (ДО, НПО, СПО, ВПО, ДопО, послевузовское ПО II.4.1. Подготовка информационных и аналитических материалов на основании проведенных исследований Информационные материалы по итогам исследования: описание целей; описание задач; результаты исследования; количество и категории участников; первичный анализ результатов Аналитические материалы по итогам исследования: оценка эффективности хода реализации мероприятий; оценка тенденций, прогноза и рисков внедрения моделей; оценка хода выполнения контрактов, реализуемых в рамках Программы по данному направлению в 2011 году; предложения по корректировке структуры и содержания мероприятий по разработке, апробации и внедрению моделей II.5.1. Разработка методических рекомендаций по корректировке структуры и содержания мероприятий по разработке, апробации и внедрению моделей независимой системы оценки результатов дошкольного, профессионального и дополнительного образования результаты оценки хода реализации мероприятий по разработке, апробации и внедрению моделей независимой системы оценки результатов дошкольного, профессионального и дополнительного образования на уровне субъектов Российской Федерации в 2012 г.; анализ факторов, оказывающих негативное влияние на реализацию данных мероприятий в 2012 г.; результаты сравнительного анализа достигнутых результатов по контрактам, реализуемым в рамках программы по данному направлению с запланированными в 2012 г.; предложения по корректировке структуры и содержания мероприятий по разработке, апробации и внедрению моделей независимой системы оценки результатов дошкольного, профессионального и дополнительного образования II.6.1. Проведение профессионального обсуждения достигнутых результатов реализации подмероприятия 7.2 «Разработка, апробация и внедрение моделей независимой системы оценки результатов дошкольного, профессионального и дополнительного образования» в текущем году и формирование предложений (установок) на следующий год Проведены семинары в режиме вебинаров во всех федеральных округах РФ по информированию об основных достигнутых результатах реализации мероприятий в 2012 году, распространению опыта между регионами. Количество участников более 770 человек. Проведен семинар с Исполнителями ГК с целью подведения итогов выполнения контрактов в 2012 году и определения задач на 2013 год Доработаны методические рекомендации корректировке структуры и содержания мероприятий Спасибо за внимание info@edu-oko.ru +7 (495) 720-55-84 +7 (926) 567-74-87
