Национальный фонд подготовки кадров Проект «Реформа системы образования» ПРОЕКТ на участие в проведении международных мониторинговых исследований (PISA, TIMSS) 1. Введение 1.1 Основания для разработки В рамках федерального компонента Проекта запланирован ряд мероприятий по совершенствованию системы мониторинга качества и статистики образования, в том числе участие в проведении в России международных сравнительных мониторинговых исследований качества общего образования: международного мониторингового исследования качества математического и естественнонаучного образования TIMSS (Trends in Mathematics and Science Study), проводимого Международной Ассоциацией по оценке образовательных достижений IEA (International Association for the Evaluation of Educational Achievements) и международной программы по оценке образовательных достижений учащихся – PISA (Program for International Student Assessment), проводимой международной организацией экономического сотрудничества и развития OECD (Organization for Economic Co-operation and Development). В настоящее время создается система мониторинга качества образования в мире. В ней участвуют более 50 стран. Ее организаторы - две вышеназванные организации: Международная ассоциация по оценке учебных достижений IEA и Организация экономического сотрудничества и развития – OECD. Страны мира объединяются в проведении международных сравнительных исследований, которые позволяют не только получить информацию об образовательных достижениях учащихся своих стран, но и сравнить эти показатели по странам, объяснить полученные результаты и выявить факторы, влияющие на результаты обучения. Во многих странах мира международные сравнительные исследования являются основной частью национальной системы оценки качества образования и их результаты используются при проведении реформ в области образования. Участие России в международных сравнительных исследованиях имеет большое стратегическое значение для развития образования в стране. Полученная в результате данных исследований информация позволяет судить о качестве образования в нашей стране и ее относительном положении в мировой системе образования. Богатейший аналитический материал о программах, учебниках и требованиях к учебным достижениям школьников в странах мира дает возможность специалистам страны принимать обоснованные решения о реформировании содержания образования и создании российских образовательных стандартов. Использование технологий педагогических измерений, разработанных ведущими специалистами мира, позволяет с наибольшим экономическим эффектом создать в России систему мониторинга качества образования на уровне мировых стандартов. В настоящее время две вышеназванные организации (IEA, OECD) готовятся к проведению на представительных выборках учащихся стран-участниц двух исследований TIMSS2003 и PISA-2003. Данные исследования взаимно дополняют друг друга. Одновременное проведение этих двух исследований дает более полноценную информацию о системе образования, оценивая различные его стороны. В рамках исследования TIMSS оценивается качество математической и естественнонаучной подготовки школьников с учетом содержания образо- вания стран-участниц проекта (оценивается общеобразовательная подготовка по математике и естествознанию учащихся 4 и 8 классов), а в исследовании PISA – способность выпускников основной школы применять полученные в школе знания и умения в ситуациях личностно и социально значимых, выходящих за пределы чисто учебных, (оценивается математическая и естественнонаучная грамотность, грамотность чтения и понимания текстов, умение решать проблемы непредметного содержания). Все это обусловливает актуальность участия России в системе международного мониторинга качества образования, а значит актуальность данной разработки. В 2002 г. руководство Минобразования России приняло участие в работе международного симпозиума по результатам исследования PISA (Берлин 18.11.2002 – 20.11.2002) и Министерством образования Российской Федерации было принято решение о продолжении участия России в международных сравнительных исследованиях. Подписан совместный приказ Министерства образования Российской Федерации и Российской академии образования от 22.11.2002 г. N 4089/25 «Об организации и проведении международных сравнительных исследований качества общего образования в 2002-2004 г.г.». По предложению Министерства образования РФ в 2002 г. была осуществлена работа по подготовке к проведению в России двух вышеперечисленных исследований (договор НФПК № E/B1.a/089/02): проведена экспертная оценка и экспериментальная проверка международного инструментария исследований (тестов и анкет) в 40 опытно-экспериментальных школах по проекту НФПК «Формирование содержание образования на базе ключевых компетентностей». 1.2 Цели и задачи Основной целью работы является организация и проведение международных сравнительных мониторинговых исследований качества общего образования TIMSS и PISA в России в период 2003-2006 г.г. Проводимые исследования должны: способствовать модернизации российского образования, создавать информационную основу для принятия управленческих решений на уровнях (федеральном, региональном), для которых сформирована представительная выборка учащихся, учитывать не только российский но и зарубежный опыт, обеспечивать сопоставимость данных о качестве образования в России, реализовывать комплексный системный подход при организации исследований, обеспечивать открытость критериев и разработанных методик для профессионального сообщества, представителей общественности, а также всех заинтересованных лиц, создать условия для использования результатов исследований в работах по совершенствованию образовательных стандартов, программ, учебной и методической литературы. Для реализации основной цели работы необходимо выполнение следующих задач отдельно для каждого из проводимых исследований: 1. Создание организационной схемы взаимодействия федеральных и региональных структур при организации и проведении исследований в отобранных регионах страны. 2. Формирование представительных выборок учащихся образовательных учреждений России. 3. Подготовка инструментария исследования. 4. Проведение совещаний региональных координаторов. 2 5. 6. 7. 8. 9. 10. Проведение обследований в образовательных учреждениях 66 регионов. Осуществление независимого контроля качества проведения обследований в регионах. Сбор, обработка и анализ полученных данных. Подготовка национального отчета и аналитических материалов по результатам исследования. Проведение научно-практической конференции по обсуждению полученных результатов. Участие в международных совещаниях по проведению исследования, обработке и анализу данных, по обсуждению полученных результатов. 2. Масштаб работы 2.1 Содержание работ При проведении работ исполнитель должен: 1. Создать организационную сеть взаимодействия федеральных и региональных структур при организации и проведении исследований в отобранных регионах страны (66 регионов). 2. Создать базы данных образовательных учреждений отобранных регионов страны в соответствии с международными требованиями, обеспечивающими формирование представительной выборки обучающихся с учетом требований для создания баз данных единого государственного экзамена и системы мониторинга качества образования (более 40000 образовательных учреждений общего и профессионального образования). 3. Сформировать выборки образовательных учреждений, классов и учащихся для проведения исследований в соответствии с международными требованиями (Исследование PISA: 220 образовательных учреждений и около 8000 обучающихся 15летнего возраста. Исследование TIMSS: выборка 1 - 210 школ, около 6500 учащихся 4-х классов, 210 учителей начальной школы; выборка 2 - 210 школ, около 6500 учащихся 8-х классов, 210 учителей математики и 840 учителей естественнонаучных предметов). 4. Подготовить инструментарий исследований (тесты, анкеты для учащихся, анкеты для учителей, анкеты для администрации образовательного учреждения, руководства для школьных координаторов, руководства по проведению тестирования, руководства по проверке заданий с открытыми ответами и др.): a. доработать апробированный в 2002 г. инструментарий по замечаниям международных и российских экспертов, b. провести верификацию на соответствие международным требованиям перевода и адаптации инструментария (в международном координационном центре), c. тиражировать инструментарий в необходимом объеме для проведения обследований в отобранных образовательных учреждениях, d. подготовить комплекты для каждого образовательного учреждения, используя международную систему идентификации. 5. Провести совещания региональных координаторов с целью их подготовки к проведению исследования в регионе. 6. Провести в отобранных образовательных учреждениях тестирование и анкетирование учащихся, анкетирование учителей и администрации образовательных учреждений. 7. Провести независимый контроль за проведением тестирования в регионах не менее чем в 25% образовательных учреждений. 3 8. Собрать первичные данные по результатам тестирования и анкетирования, провести проверку и перепроверку заданий с открытыми ответами, провести ввод данных, первичную чистку файлов, первичную обработку данных. 9. Согласовать российские данные с международным центром по обработке данных. 10. Провести статистическую обработку полученных результатов, подготовить протоколы результатов тестирования по участвовавшим образовательным учреждениям. 11. Проанализировать российские данные и подготовить национальные отчеты и аналитические материалы с учетом рекомендаций рабочей группы Министерства образования РФ, сконцентрировав внимание на объяснении полученных результатов и разработке рекомендаций по совершенствованию образовательных стандартов, программ, учебников и образовательного процесса. 12. Подготовить к публикации национальный отчет по результатам исследований в соответствии с форматом национального отчета, утвержденным рабочей группой Министерства образования Российской Федерации. 13. Провести научно-практическую конференцию по обсуждению полученных результатов в свете стратегических задач модернизации образования. 14. Принять участие в международных совещаниях по проведению исследований, обработке и анализу данных, по обсуждению полученных результатов для обеспечения качества проведения исследований и соответствия международным требованиям на всех этапах работы. 2.2 Целевые группы Результаты данной работы предназначены для распространения среди следующих групп специалистов: 1. Муниципальный уровень Заместители глав администрации (городской, районной) по социальным вопросам; Руководители муниципальных управлений образования; Руководители общеобразовательных учреждений; Учителя общеобразовательных учреждений. 2. Региональный уровень Заместители главы администрации по социальным вопросам; Руководители регионального уровня управления образованием; Специалисты в области мониторинга качества и статистики образования 3. Федеральный уровень Министерство Образования РФ; другие федеральные службы, осуществляющие функции мониторинга и статистики образования; разработчики образовательных стандартов; авторы программ и учебников 2.3 Сроки исполнения Выполнение работ по техническому заданию рассчитано на 36 месяцев после заключения контракта с Консультантом. 3. Результаты Результатами выполнения работ Консультантом являются: Базы данных образовательных учреждений регионов, отобранных для участия в исследованиях 4 Адаптированный (локализованный) к условиям российской школы международный инструментарий исследований Электронная база данных результатов исследований Национальные отчеты и аналитические материалы (включая сопоставительный анализ результатов стран участников исследований) по результатам исследований, адресованные как специалистам, так и широкой общественности Публикация и адресная рассылка национального отчета и рекомендаций по использованию результатов исследований представителям целевых групп проекта Рекомендации по использованию результатов исследований для разных пользователей (разработчиков стандартов, авторов программ и учебников, специалистовпредметников, учителей и др.) Предложения по организации обсуждения результатов исследований 5