Решетникова О.А. Технология проведения программ оценки.

Учебный курс
«Использование результатов оценки учебных достижений школьников и результатов мониторинговых
исследований для выработки управленческих решений на разных уровнях системы образования»
22-25 ноября 2011 года, г. Москва
Условия эффективного использования
результатов оценки учебных
достижений учащихся:
технология проведения программ оценки
Оксана Александровна Решетникова,
заместитель директора Российского тренингового центра
Условия эффективного использования результатов
оценки учебных достижений учащихся
•
•
•
•
Надежный инструментарий
Процедура проведения оценивания
Качественный анализ и представление результатов
Вовлечение политиков и профессионального сообщества,
поддержка других заинтересованных сторон
Условия эффективного использования результатов
оценки учебных достижений
ИЗМЕРИТЕЛИ
СБОР КАЧЕСТВЕННОЙ
ИНФОРМАЦИИ
ТЕХНОЛОГИЯ
КАЧЕСТВЕННЫЙ СБОР
ИНФОРМАЦИИ
Условия эффективного использования результатов
оценки учебных достижений учащихся
технология
Условия эффективного использования результатов
оценки учебных достижений учащихся
Условия эффективного использования результатов
оценки учебных достижений учащихся
Технология должна обеспечивать:
• Качественный сбор информации
• Существенно сокращать время сбора информации
• Предоставлять равные возможности участникам
оценочной процедуры
• Должна быть понятной исполнителям
• Должна быть отказоустойчива
Условия эффективного использования результатов
оценки учебных достижений учащихся
Процедуры оценки в соответствии с целями и
задачами делятся:
• Ответственные по отношению к участникам
(аттестация, отбор, рейтингование)
• Безответственные по отношению к участникам
(«обратная связь» для выбора стратегии развития
образования)
Условия эффективного использования результатов
оценки учебных достижений учащихся
«Три кита» процедуры оценивания
Регламентация
всех процессов
Информационная безопасность
Кадры
Условия эффективного использования результатов
оценки учебных достижений учащихся
Поль Бокюз:
знаменитый французский повар-кулинар:
«…Можно отобрать самую лучшую крупу, её сто раз промыть,
отшлифовать каждую крупинку, но каша не будет вкусной, если:
не выполнять процесс строго по рецепту,
если повар будет ленив и небрежен,
а так же, если уникальный
рецепт узнают конкуренты и
сделают лучше…»
Основные аспекты проведения процедуры оценивания
Информационная безопасность
Две группы факторов влияния на процедуру оценивания:
•
Внешние факторы, связанные с осознанием обществом «высоких ставок» данной
процедуры, и с желанием разных уровней (административного: руководство
органа управления образованием региона, муниципалитета, администрации
образовательного учреждения и др. или личного: родители выпускников,
отдельные преподаватели и др. физические лица) оказать влияние на процедуру в
своих интересах, направленных или на представление совокупных результатов в
«выгодном свете», или на получение «нужного» индивидуального результата.
•
Внутренние факторы, связанных с уровнем подготовленности каждого субъекта
Российской Федерации, уровнем организации всех процессов экзамена, степенью
обученности специалистов и др.
Основные аспекты проведения процедуры оценивания
Информационная безопасность
Дональд Кэмпбелл – американский социальный психолог
ЗАКОН КЭМПБЕЛЛА:
«чем сильнее отдельный количественный социальный
фактор используется для обоснования социальных решений,
тем сильнее он подвержен искажающим влияниям и тем
больше он сам ведет к тому, чтобы исказить и
сфальсифицировать
социальные
процессы,
которые
собственно и должны были быть изучены и улучшены»
Основные аспекты проведения процедуры оценивания
Информационная безопасность
Средства обеспечения:
- Использование защищенных каналов связи и специализированного
программного обеспечения
- Использование специальных средств защиты ЭМ на бумажных носителях
- Привлечение к ряду операций специализированных структур, имеющих
лицензию на работу с конфиденциальной информацией
- Жесткая регламентация действий структур и лиц, имеющих доступ к
информационным потокам, имеющим статус конфиденциальности
- Введение персональной ответственности за несоблюдение условий
информационной безопасности
- Соблюдение принципа «точно в срок» на всех этапах подготовки и проведения
оценочной процедуры
и др.
Основные аспекты проведения процедуры оценивания
Кадры
Средства обеспечения:
- Продуманная стратегия по подбору кадров, привлекаемых к разным
этапам оценочных процедур
- Продуманная стратегия по обучения отобранных кадров
- Введение критериев оценки работы привлеченных кадров,
разработка подходов к стимулированию и наказанию
- Общественный контроль
Основные аспекты проведения процедуры оценивания
Кадры
По данным Федерального центра тестирования по результатм ЕГЭ в
2009-2010 г.г.
2009 г – удовлетворённых апелляций по процедуре – 88
(из 3475000 чел/тестов)
2010 г. – удовлетворенных апелляций по процедуре – 189
(из 3069000 чел\тестов)
Основные аспекты проведения процедуры оценивания
Кадры
По данным Федерального центра тестирования по результатам ЕГЭ в 2010 г.
Всего заявок
Статистика обращений (ЕГЭ-2010 г)
По типам
Нештатная ситуация
1035
Консультация
Пожелания
1834
133
3002
Основные аспекты проведения процедуры оценивания
Регламентация всех процессов
Проблемы:
1) Ряд пробелов в использующихся документах
2) Несогласованность
между
документами,
регулирующими
некоторые процедуры
3) Острая необходимость в создании единой инструктивнометодической базы, позволяющей реализовывать различные по
целям и задачам оценочные процедуры
Основные аспекты проведения процедуры оценивания
Регламентация всех процессов
Типология документов
• Распорядительные
документы(приказ,
распоряжение,
решение)
• Организационные
документы(
порядок,
инстукция,
регламент)
• Информационные документы (акт, письмо, служебная
записка, протокол)
Основные аспекты проведения процедуры оценивания
Регламентация всех процессов
Регламент – это тщательно прописанный процесс или набор из
нескольких процессов при этом при написании регламента в любом
случае придется разложить этот процесс по полочкам и учесть все
нюансы. В регламенте должны быть предусмотрены выполняемые
функции, участники, исходные данные, результат, сроки, возможно –
примечание..
Регламент – это документ, который служит для того чтобы четко
зафиксировать на бумаге те или иные функциональные (часто
повторяющиеся) обязанности структур (должностных лиц), для того
чтобы четко понимать и реализовывать процессы, а так же
контролировать их.
Основные аспекты проведения процедуры оценивания
Функция
Регламентация
всех
процессов
Участник
Исходные данные
Разработка и передача ФИПИ
оригинальных вариантов Рособрнадзор
КИМ и дополнительных
материалов
(ключи,
критерии
оценивания,
алгоритм
проверки,
инструкции и т.д.) в
Рособрнадзор
Утвержденные
спецификации КИМ.
Согласованное
количество
вариантов КИМ по
каждому предмету.
Результат
Оригинальные
варианты КИМ и
дополнительные
материалы (ключи,
критерии
оценивания,
алгоритм
проверки,
инструкции и т.д.).
Акт
приёмкипередачи (ФИПИРособрнадзор).
Сроки
Примечание
Передача
КИМ
производитс
я
в
соответствии
с
планомграфиком
работ
на
бумажном
носителе и в
электронном
виде.
Основные аспекты проведения процедуры оценивания
Регламентация всех процессов
Порядок - правила, по которым совершается процесс, существующее устройство,
режим проведения процедуры, её последовательный ход.
Положение — это нормативный акт, устанавливающий порядок образования, структуру,
функцию, компетенцию, обязанности и организацию работы системы государственных
органов (таковы общие положения о министерствах РФ)
Должностная инструкция - это документ, определяющий права и обязанности
должностного лица.
Должностная инструкция включает в себя:
общие положения (наименование должности работника, наименование структурного
подразделения, схема подчиненности работника); должностные обязанности работника;
права; ответственность.
Должностная инструкция не включает в себя порядок действия работника, а определяет
конкретные виды работ, выполняемые работником.
Основные аспекты проведения процедуры оценивания
Регламентация всех процессов
Основные аспекты проведения процедуры оценивания
Регламентация всех процессов
Обеспечение:
- Унификация требований к процедурам и документам, регламентирующим
их проведение
- Разработка отраслевого стандарта, предусматривающего основные
элементы, обеспечивающие процессы подготовки и проведения
оценочных процедур с разными целями и задачами и на разных уровнях
управления образованием
- ?
Условия эффективного использования результатов
оценки учебных достижений учащихся
Спасибо за внимание!
Российский тренинговый центр ИУО РАО
www.rtc-edu.ru
E-mail: rtc.imerae@gmail.com