Отчет по II этапу Государственного контракта Москва 2012 Исполнитель:

реклама
Отчет по II этапу Государственного контракта
от 14 сентября 2011 г. № 03.P20.11.0048
Москва 2012
Исполнитель:
Общество с ограниченной ответственностью
«Оценка качества образования»
Проект 07.02-021-п-Ф-80 «Экспертно-методологическое
сопровождение реализации мероприятий по разработке, апробации
и внедрению моделей независимой системы оценки результатов
дошкольного, профессионального и дополнительного
образования»
Цель проекта – повышение эффективности разработки и качества
внедрения моделей независимой системы оценки результатов
дошкольного, профессионального и дополнительного образования.
Исполнитель – Общество с ограниченной ответственностью
«Оценка качества образования»
(Государственный контракт от 14 сентября 2011 г. № 03.P20.11.0048)
Проект спланирован на 3 года (2011-2013) и выполняется в 3 этапа.
1 этап – 2011 год
2 этап – 2012 год
3 этап – 2013 год
ЗАДАЧИ ЭТАПА
1. Доработка методологии системного подхода и инструментария для исследования
хода реализации мероприятий по разработке, апробации и внедрению моделей
независимой системы оценки результатов дошкольного, профессионального и
дополнительного образования.
2. Проведение исследований хода реализации мероприятий по разработке,
апробации и внедрению моделей независимой системы оценки результатов
дошкольного, профессионального и дополнительного образования на
федеральном уровне и уровне субъектов Российской Федерации.
3. Проведение в субъектах Российской Федерации тематических исследований по
вопросам внедрения моделей независимой системы оценки результатов
дошкольного, профессионального и дополнительного образования среди
представителей всех целевых аудиторий.
4. Подготовка информационных и аналитических материалов на основании
проведенных исследований.
5. Разработка методических рекомендаций по корректировке структуры и
содержания подмероприятия 7.2 ФЦПРО.
6. Проведение профессионального обсуждения достигнутых результатов
реализации подмероприятия 7.2 ФЦПРО в текущем году и формирование
предложений (установок) на следующий год.
II.1.1. Доработка методологии системного
подхода и инструментария для исследования хода
реализации мероприятий по разработке,
апробации и внедрению моделей независимой
системы оценки результатов (НСОР) образования
А) основные положения системного подхода к оценке
эффективности мероприятий:
- система критериев оценки и измерителей запланированных и
достигнутых уровней выполнения задач по внедрению моделей;
- предложения по обеспечению единого комплексного подхода к
проведению мониторинговых исследований хода реализации
мероприятий;
- механизмы привлечения к исследованию экспертных групп;
- основные направления совершенствования моделей НСОР.
Б) инструментарий для проведения исследований хода
реализации мероприятий
Доработанные направления совершенствования моделей

Сравнение «до» и «после»:
◦
◦
◦
◦
◦
◦


Накопление и лонгитюдный анализ данных.
Проработка каналов обратной связи и методов улучшения модели.
◦
◦
◦
◦

Статистика подготовленности и успеваемости учеников.
Показатели успешной работы преподавателей – количество часов, затраченных на
непосредственно обучение, контакт с учениками вне классного времени, работы по
повышению квалификации, слежение за литературой в предметной области и др.
Уровень материальной базы (здания, площадки вокруг зданий, количество комнат и
плотность людей, техническая база и проч.).
Уровни удовлетворенности потребителей результатов образования и персонала.
Использование стандартов образования для данной отрасли образования (ДО, ПО, ДопО)
в виде рубрик, методических указаний, системы оценивания прогресса и успеваемости и
др.
Показатели эффективности финансирования обучения лиц.
Взаимодействие и обмен информацией между всеми субъектами МНСОР.
Открытость – наличие всей документации по разработке, апробации и внедрению МНСОР
в публичном доступе и прозрачные механизмы документальной проверки.
Публичное сопоставление запланированных и достигнутых уровней функционирования
образовательной системы (по оценкам, по уровням удовлетворенности, по соответствию
образовательным и техническим стандартам, и проч.)
Сбор и распространение качественной и количественной информации о работе модели
через СМИ, социальные медиа и экспертов.
Публикация данных.
Критерии оценки уровня выполнения задач
Модели
независимой оценки
результатов
образования
•качество приемного / вступительного процесса
•качество основной образовательной программы
•качество дополнительных образовательных программ
•степень соответствия результатов образовательного
процесса требованиям рынка труда
•использование современных образовательных концепций
•уровень квалифицированности преподавательского и
педагогического состава
•качество управленческих процессов
•качество процессов планирования и финансирования
•степень оснащенности информационными технологиями
•степень материально-технической оснащенности
•качество и интенсивность научной работы
•─//─ воспитательной и просветительской деятельности
•─//─ экспертно-консультационной деятельности
преподавательского и педагогического состава
ОЦЕНИВАЕМЫЕ
МЕРОПРИЯТИЯ
Критерии
оценки:
1. Образовательная составляющая
2. Организационная составляющая
3. Научно-исследовательская и воспитательная
составляющая
4. Учет мнения всех заинтересованных сторон; оценка
механизма обратной связи
5. Учет мировых и российских подходов к
независимой оценке результатов образования
6. Ясность/понятность, прозрачность/открытость,
простота
7. Доступность для всех заинтересованных сторон
8. Степень апробированности и внедренности
9. Экономическая эффективность мероприятий
Механизм привлечения экспертных групп
Экспертный пул
консенсусное
определение
экспертных
коэффициентов
индивидуальное
заполнение карт
первичной оценки
Первичные
экспертные оценки
*
Экспертные
коэффициенты
значимости критериев
взвешивание и интегрализация
ИНТЕГРАЛЬНАЯ ОЦЕНКА
МОДЕЛИ
Инструментарий для исследования эффективности
разработки, апробации и внедрения моделей НСОКО
Скринер
Респонденты ЭКСПЕРТЫ
Информация об эксперте
Оценка модели
Описание модели
Количественные параметры модели
Оценка эффективности разработки,
апробации и внедрения модели
Оценка эффективности
комплексной
оценки
обучающегося
механизмов
достижений
Оценка эффективности технологии и
методики подготовки и проведения
процедур контроля и оценки качества
образования
ОЦЕНКА
ЭФФЕКТИВНОСТИ
МОДЕЛИ
НЕЗАВИСИМОЙ
СИСТЕМЫ ОЦЕНКИ
КАЧЕСТВА
ОБРАЗОВАНИЯ
Инструментарий для исследования восприятия
моделей НСОКО
Скринер
Информация о респонденте
Описание модели
Оценка степени разработки,
внедрения модели
апробации и
Оценка восприятия модели
Оценка
тенденций,
прогноза
внедрения моделей
и
рисков





Показатель 1.1: Количественная оценка модели независимой
оценки качества образования – наличие в модели необходимых
составляющих, их количественное выражение
Показатель 1.2: Оценка эффективности модели с точки зрения
разработки, апробации и внедрения
Показатель 1.3: Оценка эффективности модели с точки зрения
механизмов комплексной оценки академических достижений
обучающегося, его компетенций и способностей
Показатель 1.4: Оценка эффективности модели с точки зрения
технологии и методики подготовки и проведения процедур
контроля и оценки качества образования
ЭФФЕКТИВНОСТЬ

Показатель 2.1: Полнота восприятия модели независимой оценки
качества образования, ее соответствие ожиданиям респондента
Показатель 2.2: Оценка тенденций, прогноза и рисков внедрения
моделей
ВОСПРИЯТИЕ
Анализ результатов исследования базируется на 6
показателях
II.2.1. Проведение в 2012 году исследований хода
реализации мероприятий по разработке, апробации
и внедрению моделей независимой системы оценки
результатов дошкольного, профессионального и
дополнительного образования на уровне субъектов
Российской Федерации
Организационная схема проведения исследования
Этап 1. Формирование рабочей
групп по выполнению
исследований
Этап 2 . Проведение
исследований в форме опроса
Создание рабочей группы по разработке
материалов, проведению опроса и
обработке результатов
1. Отбор респондентов, равномерно
представляющих уровни образования, в
соответствии с выделенными критериями
2. Проведение опроса
3. Отбор исследуемых регионов (5
регионов в 8 федеральных округах)
Этап 3. Обработка результатов
опроса
Этап 4. Анализ полученных
результатов
Этап 5. Подготовка
аналитического отчета о ходе
реализации мероприятий
математико-статистический анализ
данных социологического опроса с
использованием компьютерных методов
обработки данных
качественный анализ и обобщение
эмпирических данных по 4 уровням
образования
обобщение результатов количественного и
качественного анализа
Организационная схема проведения исследования
Для обеспечения надежности заполнения анкет респондентами в субъектах
Российской Федерации организована функциональность заполнения в
электронном виде на официальном сайте ФЦПРО http://www.fcpro.ru/
II.2.2. Формирование экспертных групп для
проведения экспертизы реализации мероприятий
Оценка подтверждающих документов:
соответствие профильного
образования эксперта тематике
проводимых исследований;
ученая степень;
ученое звание;
должностное положение;
стаж научной или практической
работы в определённой сфере;
количество публикаций по тематике
моделей за последние три года;
цитируемость эксперта;
компетентностный уровень
экспертной оценки;
количество сформированных
экспертных заключений;
квалификация эксперта;
признанность эксперта
Косвенный анализ
(собеседование, пробное
заключение):
 высокий уровень общей
эрудиции;
 наличие академического
научного интереса к
оцениваемым проблемным
вопросам;
 наличие опыта в оцениваемой
области знаний;
 принципиальность;
 объективность;
 способность творчески
мыслить;
 интуиция
3 группы экспертов по уровню образования (ДО - 13, ПО - 18, ДопО - 18)
II.2.3. Проведение экспертизы реализации мероприятий по
разработке, апробации и внедрению моделей независимой системы
оценки результатов дошкольного, профессионального и
дополнительного образования на федеральном и региональных
уровнях
Оценка федеральных моделей по критериям:
Экспертная оценка степени выполнения контракта
Соответствие фактических сроков плановым
 Соблюдение видов и объемов отчетных материалов
Оценка охватных показателей мероприятия
Соответствие результатов работ современному уровню
знаний
 Экспертная оценка качества выполнения работ
Регистрация ОИС
Соответствие результатов положениям
законодательства РФ, требованиям образовательных
стандартов
Степень использования современных ИКТ
Степень распространения информации в СМИ
Экспертная оценка полученных результатов
Степень привлечения к экспертизе (апробации)
моделей широкого круга участников
Степень комплексности подхода к разработке моделей
Оценка уровня апробации и общественного признания
результатов
Оценка практической значимости работы
Оценка качества оформления итогового отчета
Оценка региональных моделей по критериям:

Степень актуальности и решаемый масштаб
проблем

Степень новизны модели

Уровень локализации модели

Широта, масштабы внедрения модели

Степень выполнимости (реализуемости)

Степень мультиплицируемости и
настраиваемости / Уровень адаптивности

Степень модифицируемости

Степень отторжимости / Уровень устойчивости

Уровень социальной доступности результатов
реализации модели

Потенциальный уровень потребности в
результатах

Уровень социально-экономической значимости
Степень подконтрольности

Уровень коммуникационной эффективности
Уровень эффективности управления модели
II.3.1. Проведение в субъектах Российской Федерации
тематических исследований по теме «Особенности
восприятия новых моделей системы оценки качества
дошкольного, начального профессионального,
среднего профессионального, высшего
профессионального, послевузовского
профессионального и дополнительного
образования» среди представителей всех целевых
аудиторий
 Проведены исследования в 60 субъектах Российской
Федерации (не менее 200 респондентов в каждом субъекте,
всего 12 597 участников)
 Разработаны отчетные материалы по итогам исследования,
в которых выявляются достоинства и недостатки
применяемых моделей по 6 уровням образования (ДО, НПО,
СПО, ВПО, ДопО, послевузовское ПО
II.4.1. Подготовка информационных и аналитических
материалов на основании проведенных
исследований
Информационные материалы по итогам исследования:
 описание целей;
 описание задач;
 результаты исследования;
 количество и категории участников;
 первичный анализ результатов
Аналитические материалы по итогам исследования:
 оценка эффективности хода реализации мероприятий;
 оценка тенденций, прогноза и рисков внедрения моделей;
 оценка хода выполнения контрактов, реализуемых в рамках
Программы по данному направлению в 2011 году;
 предложения по корректировке структуры и содержания мероприятий
по разработке, апробации и внедрению моделей
II.5.1. Разработка методических рекомендаций по
корректировке структуры и содержания мероприятий по
разработке, апробации и внедрению моделей
независимой системы оценки результатов дошкольного,
профессионального и дополнительного образования




результаты оценки хода реализации мероприятий по разработке,
апробации и внедрению моделей независимой системы оценки
результатов дошкольного, профессионального и дополнительного
образования на уровне субъектов Российской Федерации в 2012 г.;
анализ факторов, оказывающих негативное влияние на реализацию
данных мероприятий в 2012 г.;
результаты сравнительного анализа достигнутых результатов по
контрактам, реализуемым в рамках программы по данному
направлению с запланированными в 2012 г.;
предложения по корректировке структуры и содержания
мероприятий по разработке, апробации и внедрению моделей
независимой системы оценки результатов дошкольного,
профессионального и дополнительного образования
II.6.1. Проведение профессионального обсуждения
достигнутых результатов реализации подмероприятия
7.2 «Разработка, апробация и внедрение моделей
независимой системы оценки результатов дошкольного,
профессионального и дополнительного образования» в
текущем году и формирование предложений (установок)
на следующий год



Проведены семинары в режиме вебинаров во всех федеральных
округах РФ по информированию об основных достигнутых
результатах реализации мероприятий в 2012 году, распространению
опыта между регионами. Количество участников более 770 человек.
Проведен семинар с Исполнителями ГК с целью подведения итогов
выполнения контрактов в 2012 году и определения задач на 2013 год
Доработаны методические рекомендации корректировке структуры и
содержания мероприятий
Спасибо за внимание
[email protected]
+7 (495) 720-55-84
+7 (926) 567-74-87
Скачать