Оценка - Центр международного сотрудничества по развитию

Причины и основания для
проведения оценки:
Т. Скотт Мюррей, DataAngel Policy Research
Винсент Грини, Всемирный банк
Москва, Российская Федерация
2 – 5 февраля 2010 г.
Тел.: (613) 240-8433
e-mail: dataangel@mac.com
Цели оценки:
Национальный научно-исследовательский
совет, 2001 г.
• Содействие обучению
• Оценка индивидуальных достижений
учащихся
• Оценка эффективности программ
Цели оценки:
Winograd, Blum- Martinez and Noll, 1999
•
•
•
•
•
•
У учащихся развивается способность к самоанализу и контролю
над процессом собственного обучения
Учителя более целенаправленно организуют процесс обучения
Методисты выявляют группы учащихся, нуждающихся в особых
программах для детей из неблагополучных семей, программах для
одаренных детей или специальном обучении
Родители получают большее представление о достижениях
своих детей в плане успеваемости
Администраторы получают представление о достижениях
когорт учащихся в своих школах
Законодатели, группы поддержки и население получают
представление о достижениях когорт учащихся
Значение оценки:
• Почему мы придает значение
профессиональному обучению и
образованию:
Почему мы придаем значение
профессиональному обучению
и образованию:
Люди – это общий знаменатель прогресса. Следовательно ...
никаких усовершенствований нельзя достичь без
совершенствования людей, и уверенный прогресс достигается
там, где люди свободны и образованны. Было бы неверно
игнорировать значение автомобильных и железных дорог,
электростанций, заводов и прочих известных атрибутов
экономического развития.... Однако мы начинаем осознавать...
определенную бесплодность экономических памятников, одиноко
стоящих посреди моря безграмотности. Победа над
безграмотностью имеет первостепенное значение. Джон
Кеннет Гэлбрейт, «Общество изобилия» (1958 г.)
Американский администратор и экономист (канадец по
происхождению) (1908 – 2006 гг.)
Почему мы придаем значение
профессиональному обучению и образованию:
Источники стратегического интереса
• ЭКОНОМИЧЕСКИЕ ПОКАЗАТЕЛИ: обеспокоенность
тем, что недостаток компетенций является барьером
для экономического роста, роста
производительности и темпов технологических
инноваций (КОРЫСТЬ)
• РАВЕНСТВО: обеспокоенность по поводу роли
компетенций в развитии социального неравенства
при распределении результатов экономической
деятельности (СПРАВЕДЛИВОСТЬ)
• ЭФФЕКТИВНОСТЬ НАЛОГОВ: обеспокоенность в
отношении необходимости, эффективности и
результативности инвестиций в общественные
товары и услуги, например, образование и
здравоохранение (БЕРЕЖЛИВОСТЬ)
Основополагающие цели оценки:
• С помощью анализа – показать,
какова текущая ситуация
• С помощью сравнения – выявить,
какой ситуация могла быть
• С помощью обсуждения – решить,
какой ситуация должна быть
Волшебный рецепт:
• Наличие достоверных, надежных,
сопоставимых и поддающихся интерпретации
данных
• Анализ с учетом исходных различий
• Инклюзивные процессы, проводящие
заинтересованных участников по континууму
«данные/знания/мудрость/действие»
• Деньги и навыки для выполнения хорошей
работы
• Уважение и объективность
Системные цели, достигаемые с
помощью оценки:
• Формирование знаний: понимание причины и
последствий
• Стратегия и планирование: подготовка к
действию
• Мониторинг: выяснение хода развития событий,
выявление новых проблем
• Оценка: определение эффективности и
результативности достижения целей
предпринятых действий
• Управление: принятие решений в отношении
отдельных административных единиц
Основные варианты организации
оценки:
• По возрастным группам
• По классам
• По возрастным группам и классам
• С охватом разных групп
• Продольное исследование
Варианты оценки:
• Общая учебная программа самого
низкого уровня
• Объединенная учебная программа
• На основе общей модели
• Одна область/несколько областей
Измеряемые параметры
Учебная
программа
Фактически
измеряемые
параметры
Общая модель
Охват:
•
•
•
•
В рамках одной школы
Возрастная когорта
Государственные учреждения
Частные учреждения
«Функции экономического
производства» применительно к
системам образования: Коулмен
• «Эффект школы» (Raudenbush and Willms, 1995).
Согласно теории, успеваемость со многом
является результатом познаний, приобретаемых
ребенком дома и в школе, а «эффект школы»
определяется структурными особенностями
системы образования, стратегиями школьного
образования, ресурсами школы и практикой
классных занятий. Целью настоящего подхода,
известного как «анализ производственных
функций», является отделение вариаций,
связанных с социальным происхождением
учащихся и приобретаемыми навыками, от
вариаций, определяемых качеством обучения.
Модель эффективной школы по
Кэрролу:
Качество обучения: эффективность, с которой важные понятия
преподаются учителем в классе;
Соответствующий уровень обучения: осуществление обучения на
уровне, соответствующем способности учащихся освоить
материал;
Время: «возможности для обучения», что включает не только общий
объем времени, уделяемого обучению, но и эффективность
использования времени в классе;
Отношение к обучению: активное вовлечение учащихся в процесс
обучения, что связано с их интересом к изучаемому предмету и
значением, которое они придают результатам обучения;
Ресурсы: сюда входят как материальные, так и людские ресурсы,
выделенные для обучения учащихся
Международные примеры:
• TIMSS/PIRLS/Civics
–
–
–
–
–
Главная цель: мониторинг, стратегии и планирование
4-е и 8-е классы
Оценка осуществляется на основе учебных программ
Вопросы с несколькими вариантами ответов
Математика, естественные науки, чтение, основы
гражданства и права
– Шкалирование по модели Раша
– МШУ (Международная ассоциация по оценке школьной
успеваемости)
Вопросники TIMSS:
Вопросники PIRLS:
Вопросники PIRLS:
TIMSS: примеры вопросов по
математике
Международные примеры:
• PISA
–
–
–
–
–
–
–
Главная цель: мониторинг
Возраст 15 лет
Оценка проводится на основе общей модели
Вопросы с несколькими вариантами ответов
Чтение, математика, естественные науки
Шкалирование по модели Раша
ОЭСР
Международные примеры
(продолжение):
• IALS/ALL
– Главная цель: формирование знаний,
стратегии и планирование, мониторинг
– Возраст от 16 лет и старше
– На основе общей модели, открытые вопросы
– Сочинение, письмо, арифметика, решение
задач, основы компьютерной грамотности
– Трехпараметрическая модель IRT
– Консорциумы Канады/США/ОЭСР
Контрольный тест: пример из области
медицины
Вопрос: пример из области медицины
Контрольный тест: пример из нефтяной
области
Вопрос: пример из нефтяной области
Международные примеры
(продолжение):
• Laboratorio
– Главная цель: стратегии и планирование, мониторинг
– 3-е и 6-е классы
– На основе общей модели, вопросы с несколькими
вариантами ответов
– Чтение, математика и естественные науки
– Трехпараметрическая модель IRT
– Международный консорциум под управлением
Регионального бюро ЮНЕСКО по вопросам образования
в Латинской Америке и Карибском регионе
Международные примеры:
• Южноафриканский консорциум по
мониторингу качества образования
(SACMEQ)
– Главная цель: обучение
– По ступеням обучения
– На основе учебных программ, вопросы с
несколькими вариантами ответов
– Чтение, математика и естественные науки
– Шкалирование по модели Раша
– Консорциум министерств образования
Национальные примеры:
• США: Национальная оценка прогресса в
образовании
– Главная цель: мониторинг
– 4-е и 8-е классы
– На основе общей модели, вопросы с
несколькими вариантами ответов и открытые
вопросы
– Чтение, математика и естественные науки
– Шкалирование по модели IRT
– Федеральное правительство США
Практическое задание:
•
Перечислите факторы общего характера, которые Вы хотели
бы включить в свой вопросник, и классифицируйте их, взяв
за основу модель Кэррола:
Качество обучения: эффективность, с которой важные понятия преподаются
учителем в классе;
Соответствующий уровень обучения: осуществление обучения на уровне,
соответствующем способности учащихся освоить материал;
Время: «возможности для обучения», что включает не только общий объем
времени, уделяемого обучению, но и эффективность использования
времени в классе;
Отношение к обучению: активное вовлечение учащихся в процесс обучения,
что связано с их интересом к изучаемому предмету и значением, которое
они придают результатам обучения;
Ресурсы: сюда входят как материальные, так и людские ресурсы, выделенные
для обучения учащихся