Качество образования в начальной школе (по результатам международных сравнительных исследований) Ковалева Г.С. Москва, 28 февраля 2011 года Основное содержание 1. Краткая информация о международных исследованиях качества общего образования 2. Качество начального образования (по результатам исследования PIRLS, TIMSS, TEDS-M) 3. Примеры заданий 4. Проблемы в начальном образовании 5. Изменение качества образования при переходе из начальной в основную школу Изменения в системе оценки качества образования PIRLS 2001 PISA 2000 TIMSS 1995 1992 1995 ЕГЭ и ГИА-9 2003 1999 2006 2003 1998 1999 2000 2001 2003 2001 2003 11 класс 2006 2009 2010 2009 Введение Введение 2004 Стандарты содержания 2009 2007 9 класс 1998 Образовательные стандарты 2006 2006 Минимум содержания, требования к подготовке 2010 Предмектные, метапредметные и личностные результаты 2020 Международные сравнительные исследования качества общего образования Международная Ассоциация по оценке образовательных достижений - IEA TIMSS (1995, 1999, 2003, 2007, 2011 годы) PIRLS (1991, 2001, 2006, 2011 годы) ICCS (1999, 2000, 2008 годы) TEDS (2008 год) Организация экономического сотрудничества и развития – OECD PISA (2000, 2003, 2006, 2009, 2012 годы) TALIS (2008 год) Краткая информация об исследованиях Цели и задачи Исследование TIMSS и PIRLS TIMSS: Оценка качества математического и естественнонаучного образования в начальной, основной и средней школе (4, 8 и 11 классы) PIRLS: Оценка качества чтения и понимания текста учащимися начальной школы (4 класс) Выявление динамики в результатах (TIMSS: 1995, 1999, 2003, 2007, 2011; PIRLS: 2001, 2006, 2011) Выявление факторов, позволяющих объяснить различия в результатах Исследование PISA Оценка функциональной грамотности 15-летних учащихся в области чтения, математики и естествознания Оценка качества и доступности образования Выявление динамики результатов (2000, 2003, 2006, 2009, 2012) Выявление факторов, позволяющих объяснить различия в результатах Почему более 60 стран мира участвуют в международных сравнительных исследованиях? Международный симпозиум «Методологические преимущества крупно-масштабных кросс-национальных исследований в области образования (2000 г.): Высокое научное и техническое качество проводимых исследований и вследствие этого высокое доверие к их результатам. Страны используют результаты международных исследований для реформирования системы образования. 2. Во многих странах больше доверия к международным исследованиям, чем к национальным 3. Результаты исследований помогают понять систему образования в стране в сравнении с другими странами 4. Международные исследования способствуют обеспечению качества проведения национальных исследований в области образования 5. В рамках международных исследований наиболее эффективно отрабатываются новые методики и технологии в области оценки качества образования 1. Что дают международные исследования российским специалистам в области начального образования Результаты исследований позволяют сравнить системы образования в разных странах с точки зрения их эффективности в обучении чтению, математике и естествознанию. Цикличность исследований позволяет каждой стране сравнивать свои сегодняшние достижения с достижениями четырех- или пятилетней давности и оценивать эффективность собственной образовательной политики в обучении учащихся начальной школы. Качество образования в начальной школе Источники информации: 1. Международное исследование PIRLS (2001, 2006) Выборка 2006 года: 4955 выпускников начальной школы из 232 общеобразовательных учреждений 45 регионов, 232 учителя начальной школы, 232 директора 2. Международное исследование TIMSS (2003, 2007) Выборка 2007 года: 4464 выпускников начальной школы из 206 общеобразовательных учреждений 45 регионов, 246 учителей начальной школы, 206 директоров 3. Исследования качества подготовки учителей начальной школы (TEDS-M, исследования регионального уровня) Качество образования в начальной школе Основные показатели: По результатам исследования PIRLS 2006 1. Российские школьники 4 классов (выпускники начальной школы) продемонстрировали самые высокие результаты среди своих сверстников из 40 стран мира по умению читать и понимать тексты. 2. В 2006 году показатели России улучшились как по сравнению со средними международными показателями, так и по отношению к российским показателям 2001 года (в 2001 году Россия занимала по рейтингу 12 место из 35 стран-участниц). 3. 61% российских четвероклассников достигли высокого уровня понимания текстов, из них 19% достигли самого высокого продвинутого уровня читательской компетентности. 4. Существенный прирост в результатах зафиксирован по группе умений находить информацию в тексте, формулировать выводы, интерпретировать, обобщать информацию и анализировать, оценивать содержание текста. Качество образования в начальной школе (продолжение) Основные показатели: По результатам исследования PIRLS 2006 5. По количеству учащихся, читающих каждый день художественную литературу, Россия продолжает оставаться на первом месте (50% российских учащихся по сравнению с 32% в среднем по странамучастницам). 6. В России по сравнению с 2001 годом, ухудшилось взаимодействие школы и родителей, родители теперь меньше участвуют в жизни школы. 7. В России результаты учащихся по чтению в школах, где учится мало детей из экономически неблагополучных семей, на 51 балл выше, чем результаты учащихся в школах, где процент семей, испытывающих экономические трудности, превышает 50%. 8. В России 67% учителей начальной школы довольны своей профессиональной деятельностью. 64% родителей довольны школой, в которой учится их ребенок. Класс, в Основные результаты исследования PIRLS-2006 Средний котором Средний Индекс Класс, в балл проводилось возрастИндекс развития** Средний котором Средний Страны балл проводилось возраст развития** тестирование тестирование Россия 565 4 0,797 10,8 Россия 565 0,797 Гонконг 564 44 1010,8 0,927 560 4 0,950 Канада, Альберта 9,9 Гонконг 564 4 10 0,9160,927 Сингапур 558 4 10 558 4 0,950 Канада, Британская Колумбия 9,8 560 4 0,950 Канада, Альберта Люксембург 557 5 11 9,9 0,945 555 4 0,950 Канада, Онтарио 9,8 Сингапур 558 0,916 Италия 551 44 10 10 0,940 Венгрия 551 4 0,869 10,7 558 0,950 Канада, Британская Колумбия Швеция 549 44 11 9,8 0,951 Германия 548 4 0,932 10,5 Люксембург 557 0,945 Нидерланды 547 45 10 11 0,947 Бельгия (фл.) 547 4 0,945 10 555 0,950 Канада, Онтарио Болгария 547 44 11 9,8 0,816 Дания 546 4 0,943 10,9 Италия 551 0,940 542 44 10 10 0,950 Канада, Нова Скотия Латвия 541 4 0,845 11 Венгрия 551 0,869 США 540 44 1010,7 0,948 Англия 539 5 0,940 10,3 Швеция 549 0,951 Австрия 538 44 10 11 0,944 Литва 537 4 0,857 10,7 Германия 548 0,932 Китайский Тайбэй 535 44 1010,5 0,910 533 4 0,950 Канада, Квебек 10,1 Нидерланды 547 0,947 Новая Зеландия 532 4,5 - 4 5,5 10 10 0,936 Словакия 531 4 0,856 10,4 Бельгия (фл.) 547 0,945 Шотландия 527 54 10 10 0,940 Франция 522 4 0,942 10 Словения 522 3 или 10 11 0,910 Болгария 547 44 0,816 Польша 519 4 0,862 9,9 513 44 1010,9 0,938 ДанияИспания 546 0,943 Израиль 512 4 0,927 10,1 Исландия 511 44 10 10 0,960 542 0,950 Канада, Нова Скотия PIRLS среднее международное 500 – – Молдова 500 44 11 Латвия 541 0,845 11 0,694 Бельгия (фр.) 500 4 0,945 9,9 498 4 10 США Норвегия 540 4 10 0,965 0,948 Румыния 489 4 0,805 10,9 Грузия 471 4 10 0,743 Англия 539 5 10,3 0,7960,940 Македония 442 4 10,6 Тринидад и Тобаго 436 5 10 Австрия 538 10 0,809 0,944 Иран 421 44 0,746 10,2 Индонезия 405 4 10 0,711 ЛитваКатар 537 0,857 353 44 0,844 9,810,7 Кувейт 330 4 10 0,871 Китайский Тайбэй 535 0,910 Марокко 323 44 0,640 10,810 ЮАР 302 5 12 0,653 Канада, Квебек 533 4 0,950 10,1 Новая Зеландия 532 4,5 - 5,5 10 0,936 Страны Сравнение результатов исследования PIRLS 2001 и 2006 годов Различие Источник : IEA Progress in International Reading Literacy Study (PIRLS) 2006. PIRLS 2006 PIRLS 2001 между Различие Страны Средний Средний Выше в 2001 баллами PIRLS 2006 PIRLS 2001 между Страны Средний Средний в 2001 Выше в 2006 баллами балл балл Выше 2001 и 2006 балл балл 2001 и 2006 годов годов Россия 565 (3,4) 528 (4,4) 37 (5,6) Гонконг 564 (2,4) 36 (3,9) Россия 565 528 (3,4)(3,1) 528 (4,4) 37 (5,6) Сингапур 558 (2,9) 528 (5,2) 30 (5,9) Гонконг 564 502 (2,4)(2,0) 528 (3,1) 36 (3,9) Словения 522 (2,1) 20 (2,9) Словакия 531 (2,8) 518 (2,8) 13 (4,0) Сингапур 558 541 (2,9)(2,4) 528 (5,2) 30 (5,9) Италия 551 (2,9) 11 (3,8) Германия 548 (2,2) Словения 522 539 (2,1)(1,9) 50298 (2,9) (2,0) 20 (2,9) Молдова 500 (3,0) 492 (4,0) (5,0) Венгрия 551 (3,0) Словакия 531 543 (2,8)(2,2) 5188 (3,7)(2,8) 13 (4,0) Иран 421 (3,1) 414 (4,2) 7 (5,2) 554 (2,8) Канада,Онтарио Италия 551 548 (2,9)(3,3) 5416 (4,4)(2,4) 11 (3,8) Израиль 512 (3,3) 509 (2,8) 4 (4,4) Германия 548 529 (2,2)(3,6) 5393 (4,1)(1,9) 9 (2,9) Новая Зеландия 532 (2,0) Македония 442 (4,1) 442 (4,6) 1 (6,2) Молдова 500 528 (3,0)(3,6) 492 (4,0) 8 (5,0) Шотландия 527 (2,8) -1 (4,6) Норвегия 498 (2,6) -1 (3,9) Венгрия 551 499 (3,0)(2,9) 543 (2,2) 8 (3,7) Исландия 511 (1,3) 512 (1,2) -2 (1,8) США 540 (3,5) -2 (5,2) Иран 421 542 (3,1)(3,8) 414 (4,2) 7 (5,2) Болгария 547 (4,4) 550 (3,8) -3 (5,8) Франция 522 (2,1) -4 (3,1) 554 525 (2,8)(2,4) 548 (3,3) 6 (4,4) Канада,Онтарио Латвия 541 (2,3) 545 (2,3) -4 (3,3) 533 (2,8) -4 (4,1) Канада, Квебек Израиль 512 537 (3,3)(3,0) 509 (2,8) 4 (4,4) Литва 537 (1,6) 543 (2,6) -6 (3,1) Новая Зеландия 547 (1,5) 532 554 (2,0)(2,5) 529 (3,6) 3 (4,1) Нидерланды -7 (2,9) Швеция 549 (2,3) 561 (2,2) -12 (3,2) Македония 442 553 (4,1)(3,4) 442 (4,6) 1 (6,2) Англия 539 (2,6) -13 (4,3) Румыния 489 (5,0) -22 (6,8) Шотландия 527 512 (2,8)(4,6) 528 (3,6) -1 (4,6) Марокко 323 (5,9) 350 (9,6) -27 (11,3) –40 –3 –2 -1 –1 0 10 20 30 40 Норвегия 498 (2,6) 499 (2,9) (3,9) Исландия 511 (1,3) 512 (1,2) -2 (1,8) США 540 (3,5) 542 (3,8) -2 (5,2) ( )В скобках указаны стандартные ошибки измерения. Различие статистически значимо Выше в 2 Различие статистически значимо Различие статистически незначимо Распределение российских учащихся по уровням понимания текста (указан процент детей, достигших каждого уровня в России и в 26 странах, принимавших участие в исследовании в 2001 и 2006 годах) 26 стран, 2001 Россия, 2001 26 стран, 2006 Россия, 2006 0% 8 30 5 34 34 9 41 31 19 17 20% 16 34 42 16 29 40% 60% 11 4 10 8 80% 2 100% Процент учащихся в ысокий пов ышенный средний низкий самый низкий Разница в результатах самых сильных и самых слабых читателей: 5% самых слабых читателей показали средний балл 443 и ниже 5% самых хороших читателей показали средний балл 671 и выше разница составила 228 баллов Распределение выпускников начальной школы по уровню их готовности к обучению чтению 40 37 Процент учащихся 35 30 28 30 33 25 25 24 2001 год 20 15 2006 год 14 10 10 5 0 Высокий Средний Низкий Очень низкий Уровень готовности (по мнению родителей) Распределение общеобразовательных учреждений России, участвовавших в исследовании PIRLS-2006, на основе их средних результатов. Средний результат школы 700 600 Средний результат по Росcии (565 баллов) 500 Средний международный результат (500 баллов) 400 300 200 Рейтинговый номер школы Международный тест PIRLS разработан для оценки четырех основных действий читателя, обеспечивающих относительную полноту понимания текста (как художественного, так и информационного): вычитывать детали (единицы информации), впрямую упомянутые в тексте; делать на основе этой информации несложные выводы; интерпретировать и интегрировать отдельные сообщения текста; оценивать содержание, язык и форму всего сообщения и его отдельных элементов. У развитого читателя должны сформированы обе группы умений: умения, целиком основанные на быть тексте: извлекать из текста информацию и строить на ее основании простейшие суждения; умения, основанные на собственных размышлениях о прочитанном: интегрировать, интерпретировать и оценивать информацию текста в контексте собственных знаний читателя. Из 64 заданий к литературным текстам российский показатель: ниже среднего международного по 3 заданиям, что составляет 5% от общего числа заданий максимальный по 12 заданиям, это составляет 19% от общего числа заданий Из 61 задания к информационным текстам по 2-м заданиям (3% от общего числа заданий) российский показатель выполнения ниже среднего международного по 7 заданиям (12% от общего числа заданий) российский показатель является максимальным для всей международной выборки Литературные тексты Школьникам труднее всего: Интерпретировать и обобщать информацию. Лучше всего они справляются с: Поиском и выявлением информации, заданной в явном виде; С оценкой содержания, языка и структуры текста. Информационные тексты Школьникам труднее всего: Искать и выявлять информацию, заданную в явном виде. Формулировать прямые выводы и заключения на основе фактов, имеющихся в тексте. Лучше всего они справляются с: Оценкой содержания, языка и структуры текста. Наиболее сложная форма - открытый вопрос Данные о выполнении заданий к тексту «Невероятная ночь» Задание 11 к тексту «Невероятная ночь» Задание 8 к тексту «Невероятная ночь» Часть учащихся не получают максимальный балл за задания, в которых нужно привести два примера. Например: 8. Как журнал помог Ане? Приведи два примера. Средний процент выполнения российскими школьниками этого задания статистически значимо ниже, чем средний международный процент выполнения. За данное задание можно было получить от 0 до 2 баллов. Российские результаты: 0 баллов – 9,1%; 1 балл – 33,5%; 2 балла – 55,4% Данные о выполнении заданий к тексту «Комочек глины» Задания 10-11 к тексту «Комочек глины» Трудность вызывают задания, для выполнения которых нужно обобщить информацию, содержащуюся в разных частях текста, например, в начале и в конце текста (Комочек глины № 10). Средний процент выполнения российскими школьниками этого задания статистически значимо ниже, чем средний международный процент выполнения. За данное задание можно было получить от 0 до 3 баллов. Российские результаты: 0 баллов – 18,3%; 1 балл – 21,1%; 2 балла – 23,5%; 3 балла – 32,9% Данные о выполнении заданий к тексту «Антарктида» Задание 11 к тексту «Антарктида» Задание 4 к тексту «Антарктида» 4. Подумай о том, что говорится в статье об Антарктиде. Приведи две причины, по которым большинство людей, которые приезжают в Антарктиду, не делают этого в период с апреля по сентябрь. За данное задание можно было получить от 0 до 2 баллов. Российские результаты: 0 баллов – 12,6%; 1 балл – 49,3%; 2 балла – 31,3% Трудность представляют задания, в которых необходимо не только выбрать какоелибо утверждение, но и объяснить свой выбор, привести примеры, доказывающие его. За такие задания значительный процент российских школьников получал 0 баллов, т.к. они лишь выбирали утверждение и больше ничего не писали. Примеры заданий с максимальными показателями. Вопросы к тексту «Невероятная ночь» 2. Откуда появился крокодил? А из ванной Б с обложки журнала В из-под кровати Г из ближайшей реки 4. Почему Аня решила, что крокодил собирается атаковать? А Он показал длинный ряд зубов. Б Он издал громкое шипение. В Он начал ворчать и фыркать. Г Он двигал хвостом вверх и вниз. Примеры заданий с максимальными показателями. Вопросы к тексту «Невероятная ночь» 5. Пронумеруй события в том порядке, в котором они произошли в рассказе. Номер 1 уже поставлен. __ Аня увидела крокодила. __ Крокодил съел двух фламинго. __ Аня попыталась объяснить своим родителям, почему разбита дверь. _1_ Аня пошла в ванную комнату. __ Аня вбежала в свою комнату и захлопнула дверь. 7. Как была сломана дверь в спальню? А Крокодил хвостом пробил дверь. Б Большая ваза разбилась о дверь. В Фламинго острым клювом ударил в дверь. Г Кровать ударилась в дверь. 12. Автор рассказа не сказал нам, приснилось Ане её приключение или нет. Приведи одно свидетельство того, что это мог быть сон. Приведи одно свидетельство того, что это мог быть не сон. Примеры заданий с максимальными показателями. Вопросы к тексту «Комочек глины» 9. Какие слова в рассказе показывают, что маленькая девочка знала, что она хочет сделать? А «её пальцы казались восхитительными» Б «Маленькая девочка увидела комочек глины около окна» В «Девочка держит её осторожно» Г «её руки двигались с определённой целью» 13. Какова главная мысль этого рассказа? А Люди похожи на глину: их можно изменять и придавать им форму. Б В мире много горя. В Любая вещь чувствует себя счастливой, когда находит себе применение. Г Гончарное искусство – лучший способ нести добро в этот мир. Примеры заданий с минимальными показателями Вопросы к тексту «Комочек глины» 11. Маленькая девочка – важный персонаж в этом рассказе. Объясни, почему так важна её роль во всём, что произошло. 12. Автор рассказа пишет о комочке глины, как о живом существе. Что он хочет помочь тебе представить? А что значит оказаться под дождём Б что может чувствовать комочек глины В что значит работать с глиной Г что чувствуют, когда делают что-то собственными руками Вопросы к тексту «В поисках еды» 12. Объясни, почему землю и песок в бутылку важно насыпать именно слоями. 13. Объясни, почему в эксперименте с дождевыми червями кусочки картофеля и лука важно положить на верхний слой земли. 15. Какой из этих трёх экспериментов показался тебе самым интересным? Используй текст, чтобы объяснить свой ответ. Анализ учебников начальной школы, проведенный в 2008-2009 годах в рамках вторичного анализа результатов исследования PIRLS, выявил следующие проблемные точки: Не проводится работа с информационным текстом. Учащимся не предлагается проиллюстрировать свои наблюдения, объяснить свою точку зрения. Степень развёрнутости, подробности ответа остаётся произвольной. Следствие: Усугубляет проблемы, выявленные при анализе результатов PIRLS -2006: 1) появление неточных ответов, выводов без опоры на текст; 2) затруднения при формулировании самостоятельного суждения в свободной форме. Серьёзной проблемой является несоответствие между ограниченной и поверхностной информацией, содержащейся в кратких по объёму и обзорных по характеру текстах, и проблемно ориентированными, комплексными вопросами и заданиями. Это несоответствие провоцирует необоснованные и не опирающиеся на анализ текста суждения. Качество образования в начальной школе (продолжение) Основные показатели: По результатам исследования TIMSS 2007 9. Уровень подготовки российских школьников 4 классов по естественно-математическим предметам устойчиво превышает средние международные показатели. Российские школьники не имеют существенных различий в общеобразовательной подготовке со своими сверстниками из большинства развитых стран мира. Исключение составляет лидирующая в мире группа стран Юго-Восточной Азии и Тихоокеанского региона (Япония, Южная Корея, Сингапур). 10. Высокий уровень достижений по математике продемонстрировали 48% учащихся 4 классов, а по естествознанию - 49%. Из них 19% учащихся овладели знаниями и умениями самого высокого (продвинутого) уровня и по математике, и по естествознанию. Качество образования в начальной школе (продолжение) Основные показатели: По результатам исследования TIMSS 2007 11. В соответствии с международными стандартами качества низкий уровень подготовки по международной шкале или ниже этого уровня продемонстрировали почти пятая часть учащихся 4 класса (19% - по математике и 18% по естествознанию). Они смогли выполнить лишь самые простые задания международных тестов. 12. По сравнению с 2003 годом отмечается положительная тенденция увеличения числа российских учащихся 4 классов, достигших продвинутого уровня подготовки и по математике (с 11% до 16%), и по естествознанию (с 11% до 16%). Уменьшилось число детей, не освоивших знания самого низкого уровня по естествознанию (с 7% до 4%). По математике в 4 классе не произошло никаких изменений. Качество образования в начальной школе (продолжение) Основные показатели: По результатам исследования TIMSS 2007 13. Исследование косвенным образом подтвердило улучшение общего экономического состояния российских семей к 2007 году. По данным анкетирования директоров общеобразовательных учреждений, в среднем по России на 10% по сравнению с 2003 годом увеличилось число школ, в которых большинство обучающихся из экономически благополучных семей. 14. По сравнению с 2003 годом улучшилась в среднем образовательная среда в российских школах. Значительно выросло число школ, ответы директоров которых свидетельствовали о хорошем уровне материальнотехнического оснащения кабинетов естественнонаучных предметов (на 32%). Значительно больше учащихся 4 чувствуют себя в безопасности в школе (на 11%). Отмечено в среднем повышение степени удовлетворенности как директоров, так и учителей своей работой в школе. Наблюдается тенденция – чем выше уровень удовлетворенности учителей своей работой, тем выше средний балл их учащихся. Основные результаты учащихся по математике TIMSS-2007 ** ** ** ** ** ** ** Гонконг Сингапур Тайвань Япония Казахстан Российская Федерация Англия Латвия Нидерланды Литва США Германия Дания Австралия Венгрия Италия Австрия Швеция Словения Сред. международное Армения Словацкая Республика Шотландия Новая Зеландия Чешская Республика Норвегия Украина Грузия Иран Алжир Колумбия Марокко Сальвадор Тунис Кувейт Катар Йемен 0 100 200 300 400 500 600 700 Распределение результатов (процентили) 5- й 25- й 75- й школе 4 4 4 4 4 4 5 4 4 4 4 4 4 4 4 4 4 4 4 4 4 5 4,5 - 5,5 4 4 4 4 4 4 4 4 4 4 4 4 4 Средний возраст 10,2 10,4 10,2 10,5 10,6 10,8 10,2 11,0 10,2 10,8 10,3 10,4 11,0 9,9 10,7 9,8 10,3 10,8 9,8 10,6 10,4 9,8 10,0 10,3 9,8 10,3 10,1 10,2 10,2 10,4 10,6 11,0 10,2 10,2 9,7 11,2 Индекс развития 0,937 0,922 0,932 0,953 0,794 0,813 0,946 0,855 0,953 0,862 0,951 0,935 0,949 0,962 0,874 0,941 0,948 0,956 0,917 0 0,775 0,863 0,946 0,943 0,891 0,968 0,788 0,754 0,759 0,733 0,791 0,646 0,735 0,766 0,891 0,875 0,508 Страна ** ** ** ** # ** ** ** ** ** 800 Средний балл страны статистически значимо выше среднего международного балла 95- й Средний балл и доверительный интервал при уровне достоверности 95% (±2SE) 607 (3,6) 599 (3,7) 576 (1,7) 568 (2,1) 549 (7,1) 544 (4,9) 541 (2,9) 537 (2,3) 535 (2,1) 530 (2,4) 529 (2,4) 525 (2,3) 523 (2,4) 516 (3,5) 510 (3,5) 507 (3,1) 505 (2,0) 503 (2,5) 502 (1,8) 500 500 (4,3) 496 (4,5) 494 (2,2) 492 (2,3) 486 (2,8) 473 (2,5) 469 (2,9) 438 (4,2) 402 (4,1) 378 (5,2) 355 (5,0) 341 (4,7) 330 (4,1) 327 (4,5) 316 (3,6) 296 (1,0) 224 (6,0) обучения в 8 класс Число лет Средний балл страны статистически значимо ниже среднего международного балла * Индекс разв ития в ключает в себя три составляющие: ожидаемая продолжительность жизни, у ровень образования и ВВП на ду шу населения. Источник: United Nations Development Programme’s Human Development Report 2007/2008, p.229-232 ** Страны, не в ыполнив шие некоторые обязательные требования к формированию в ыборки ( ) В скобках у казана стандартная ошибка измерения Распределение результатов по математике Средний балл Тайвань Республика Корея Сингапур Гонконг Япония Венгрия Англия Российская Федерация США Литва Чешская Республика Словения Сред. международное Армения Австралия Швеция Мальта Шотландия Сербия Италия Малайзия Норвегия Кипр Болгария Израиль Украина Румы ния Босния и Герцеговина Ливан Таиланд Турция Иордания Тунис Грузия Иран Бахрейн Индонезия Сирия Египет Алжир Колумбия Оман Палестина Ботсвана Кувейт Сальвадор Саудовская Аравия Гана Катар Марокко 0 100 200 300 400 500 600 700 Распределение результатов (процентили) 5- й 25- й 75- й 95- й Средний балл и доверительный интервал при уровне достоверности 95% (±2SE) 800 598 597 593 572 570 517 513 512 508 506 504 501 500 499 496 491 488 487 486 480 474 469 465 464 463 462 461 456 449 441 432 427 420 410 403 398 397 395 391 387 380 372 367 364 354 340 329 309 307 381 обучения в (4,5) (2,7) (3,8) (5,8) (2,4) (3,5) (4,8) (4,1) (2,8) (2,3) (2,4) (2,1) школе 8 8 8 8 8 8 9 7 или 8 8 8 8 7 или 8 (3,5) (3,9) (2,3) (1,2) (3,7) (3,3) (3,0) (5,0) (2,0) (1,6) (5,0) (3,9) (3,6) (4,1) (2,7) (4,0) (5,0) (4,8) (4,1) (2,4) (5,9) (4,1) (1,6) (3,8) (3,8) (3,6) (2,1) (3,6) (3,4) (3,5) (2,3) (2,3) (2,8) (2,9) (4,4) (1,4) (3,0) 8 8 8 9 9 8 8 8 8 8 8 8 8 8 8 или 9 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 Средний Индекс возраст развития 14,2 14,3 14,4 14,4 14,5 14,6 14,2 14,6 14,3 14,9 14,4 13,8 14,9 13,9 14,8 14,0 13,7 14,9 13,9 14,3 13,8 13,8 14,9 14,0 14,2 15,0 14,7 14,4 14,3 14,0 14,0 14,5 14,2 14,2 14,1 14,3 13,9 14,1 14,5 14,5 14,3 14,0 14,9 14,4 15,0 14,4 15,8 13,9 14,8 0,932 0,921 0,922 0,937 0,953 0,874 0,946 0,802 0,951 0,862 0,891 0,917 0 0,775 0,962 0,956 0,878 0,946 0,810 0,941 0,811 0,968 0,903 0,824 0,932 0,788 0,813 0,803 0,772 0,781 0,775 0,773 0,766 0,754 0,759 0,866 0,728 0,724 0,708 0,733 0,791 0,814 0,731 0,654 0,891 0,735 0,812 0,553 0,875 0,646 Средний балл страны статистически значимо выше среднего международного балла Средний балл страны статистически значимо ниже среднего международного балла * Индекс разв ития в ключает в себя три состав ляющие: ожидаемая продолжительность жизни, у ров ень образов ания и ВВП на ду шу населения. Источник: United Nations Development Programme’s Human Development Report 2007/2008, p.229-232 ** Страны, не в ыполнив шие некоторые обязательные требов ания к формиров анию в ыборки ( ) В скобках у казана стандартная ошибка измерения Источник : IEA's Trends in International Mathematics and Science Study (TIMSS) 2007 ** Средний балл Распределение результатов по математике Страна Число лет Источник : IEA's Trends in Int ernat ional Mat hemat ics and Science St udy (TIMSS) 2007 4 класс Основные результаты учащихся по естествознанию TIMSS-2007 ** ** ** ** ** ** # ** Средний балл обучения в естествознанию Сингапур Тайвань Гонконг Япония Российская Федерация Латвия Англия США Венгрия Италия Казахстан Германия Австралия Словацкая Республика Австрия Швеция Нидерланды Словения Дания Чешская Республика Литва Новая Зеландия Шотландия Сред. международное Армения Норвегия Украина Иран Грузия Колумбия Сальвадор Алжир Кувейт Тунис Марокко Катар Йемен 0 100 200 300 400 500 600 700 Распределение результатов (процентили) 5-й 25-й 75-й 95-й Средний балл и доверительный интервал при уровне достоверности 95% (±2SE) 587 (4,1) 557 (2,0) 554 (3,5) 548 (2,1) 546 (4,8) 542 (2,3) 542 (2,9) 539 (2,7) 536 (3,3) 535 (3,2) 533 (5,6) 528 (2,4) 527 (3,3) 526 (4,8) 526 (2,5) 525 (2,9) 523 (2,6) 518 (1,9) 517 (2,9) 515 (3,1) 514 (2,4) 504 (2,6) 500 (2,3) 500 484 (5,7) 477 (3,5) 474 (3,1) 436 (4,3) 418 (4,6) 400 (5,4) 390 (3,4) 354 (6,0) 348 (4,4) 318 (5,9) 297 (5,9) 294 (2,6) 197 (7,2) Средний Индекс возраст развития * школе 4 4 4 4 4 4 5 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4.5 - 5.5 5 10,4 10,2 10,2 10,5 10,8 11,0 10,2 10,3 10,7 9,8 10,6 10,4 9,9 10,4 10,3 10,8 10,2 9,8 11,0 10,3 10,8 10,0 9,8 4 4 4 4 4 4 4 4 4 4 4 4 4 10,6 9,8 10,3 10,2 10,1 10,4 11,0 10,2 10,2 10,2 10,6 9,7 11,2 0,922 0,932 0,937 0,953 0,813 0,855 0,946 0,951 0,874 0,941 0,794 0,935 0,962 0,863 0,948 0,956 0,953 0,917 0,949 0,891 0,862 0,943 0,946 0,775 0,968 0,788 0,759 0,754 0,791 0,735 0,733 0,891 0,766 0,646 0,875 0,508 800 Страна ** ** ** ** # ** Средний балл страны статистически значимо выше среднего международного балла Средний балл страны статистически значимо ниже среднего международного балла * Индекс разв ития в ключает в себя три состав ляющие: ожидаемая продолжительность жизни, у ров ень образов ания и ВВП на ду шу населения. Источник: United Nations Development Programme’s Human Development Report 2007/2008, p.229-232 ** Страны, не в ыполнив шие некоторые обязательные требов ания к формиров анию в ыборки ( ) В скобках у казана стандартная ошибка измерения ** ** ** ** ** ** Средний балл естествознанию Сингапур Тайвань Япония Республика Корея Англия Чешская Республика Венгрия Словения Гонконг Российская Федерация США Литва Автралия Швеция Сред. международное Шотландия Италия Армения Норвегия Украина Иордания Малайзия Таиланд Сербия Болгария Израиль Бахрейн Босния и Герцеговина Румы ния Иран Мальта Турция Сирия Кипр Тунис Индонезия Оман Грузия Кувейт Колумбия Ливан Египет Алжир Палестина Саудовская Аравия Сальвадор Ботсвана Катар Гана Марокко 0 100 200 300 400 500 600 700 Распределение результатов (процентили) 5- й 25- й 75- й 8 класс Число лет Распредел ение резул ьтатов по 800 Средний Индекс возраст развития (4,4) (3,7) (1,9) (2,0) (4,5) (2,9) (1,9) (2,2) (4,9) (3,9) (2,9) (2,5) (3,6) (2,6) школе 8 8 8 8 9 8 8 7 или 8 8 7 или 8 8 8 8 8 14,4 14,2 14,5 14,3 14,2 14,6 14,4 13,8 14,4 14,6 14,3 14,9 13,9 14,8 (3,4) (2,8) (5,8) (2,2) (3,5) (4,0) (6,0) (4,3) (3,2) (5,9) (4,3) (1,7) (2,8) (3,9) (3,6) (1,4) (3,7) (2,9) (2,0) (2,1) (3,4) (3,0) (4,8) (2,8) (3,5) (5,9) (3,6) (1,7) (3,5) (2,4) (2,9) (3,1) (1,7) (5,4) (2,9) 9 8 8 8 8 8 8 8 8 8 8 8 8 или 9 8 8 9 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 13,7 13,9 14,9 13,8 14,2 14,0 14,3 14,3 14,9 14,9 14,0 14,1 14,7 15,0 14,2 14,0 14,0 13,9 13,8 14,5 14,3 14,3 14,2 14,4 14,5 14,4 14,1 14,5 14,0 14,4 15,0 14,9 13,9 15,8 14,8 0,922 0,932 0,953 0,921 0,946 0,874 0,891 0,917 0,937 0,802 0,951 0,862 0,962 0,956 0,946 0,941 0,775 0,968 0,788 0,773 0,811 0,781 0,810 0,824 0,932 0,866 0,803 0,813 0,759 0,878 0,775 0,724 0,903 0,766 0,728 0,814 0,754 0,891 0,791 0,772 0,708 0,733 0,731 0,812 0,735 0,654 0,875 0,553 0,646 Средний балл страны статистически значимо выше среднего международного балла 95- й Средний балл и доверительный интервал при уровне достоверности 95% (±2SE) 567 561 554 553 542 539 539 538 530 530 520 519 515 511 500 496 495 488 487 485 482 471 471 470 470 468 467 466 462 459 457 454 452 452 445 427 423 421 418 417 414 408 408 404 403 387 355 319 303 402 обучения в Средний балл страны статистически значимо ниже среднего международного балла * Индекс разв ития в ключает в себя три состав ляющие: ожидаемая продолжительность жизни, у ров ень образов ания и ВВП на ду шу населения. Источник: United Nations Development Programme’s Human Development Report 2007/2008, p.229-232 ** Страны, не в ыполнив шие некоторые обязательные требов ания к формиров анию в ыборки ( ) В скобках у казана стандартная ошибка измерения Источник : IEA's Trends in International Mathematics and Science Study (TIMSS) 2007 Распределение результатов по Страна ** Число лет Источник : IEA's Trends in Int ernat ional Mat hemat ics and Science St udy (TIMSS) 2007 4 класс Результаты стран по сравнению с Россией (математика) 4 класс Выше, чем в России 4 страны: Сингапур, Япония 4 страны: Не отличаются Англия, от российских Нидерланды Ниже, чем в России 8 класс Гонконг, Тайвань, 5 стран: Тайвань, Республика Корея, Сингапур, Гонконг, Япония Казахстан, 5 стран: Венгрия, Англия, США, Латвия, Литва, Чешская Республика 27 стран: Литва, США, Германия, Дания, Австралия, Венгрия, Италия, Австрия, Швеция, Словения, Армения, Словацкая Республика, Шотландия, Новая Зеландия, Чехия, Норвегия, Украина, Грузия, Иран, Алжир, Колумбия, Марокко, Сальвадор, Тунис, Кувейт, Катар, Йемен. 38 стран: Словения, Армения, Австралия, Швеция, Мальта, Шотландия, Сербия, Италия, Малайзия, Норвегия, Кипр, Болгария, Израиль, Украина, Румыния, Босния и Герцеговина, Ливан, Таиланд, Турция, Иордания, Тунис, Грузия, Иран, Бахрейн, Индонезия, Сирия, Египет, Алжир, Марокко, Колумбия, Оман, Палестина, Ботсвана, Кувейт, Сальвадор, Саудовская Аравия, Гана, Катар. Результаты стран по сравнению с Россией (естествознание) 4 класс 8 класс Выше, чем в России 2 страны: Сингапур и Тайвань 6 стран: Республика Республика Сингапур, Корея, Тайвань, Англия, Япония, Чешская Не отличаются от российских 8 стран: Гонконг, Япония, Латвия, Англия, США, Венгрия, Италия, Казахстан 3 страны: Венгрия, Словения, Гонконг Ниже, чем в России 25 стран: Германия, Австралия, Словацкая Республика, Австрия, Швеция, Нидерланды, Словения, Дания, Чешская Республика, Литва, Новая Зеландия, Шотландия, Армения, Норвегия, Украина, Иран, Грузия, Колумбия, Сальвадор, Алжир, Кувейт, Тунис, Марокко, Катар, Йемен 39 стран: США, Литва, Австралия, Швеция, Шотландия, Италия, Армения, Норвегия, Украина, Иордания, Малайзия, Таиланд, Сербия, Болгария, Израиль, Бахрейн, Босния и Герцеговина, Румыния, Иран, Мальта, Турция, Сирия, Кипр, Тунис, Индонезия, Оман, Грузия, Кувейт, Колумбия, Ливан, Египет, Алжир, Палестина, Саудовская Аравия, Марокко, Сальвадор, Ботсвана, Катар, Гана Изменения в образовательной среде (по сравнению с 2003 годом) Улучшилась оснащенность образовательных учреждений (математика 4 класс – на 35% больше учащихся в ОУ с высоким показателем оснащенности кабинетов, 8 класс – на 23%; естествознание 4 класс на 32%, 8 класс - на 22%) Больше учащихся имеют возможность использовать компьютер на уроках математики (на 10% в 4 классе и на 28% в 8 классе) и естественнонаучных предметов (на 12% в 4 классе и на 36% в 8 классе) Больше учащихся имеют дома компьютер (4 класс - на 28%, 8 класс – на 31%). Однако в семьях учащихся стало меньше книг (на 11% сократилось число учащихся 8 класса, у которых дома более 100 книг) Повысилась безопасность в ОУ (высокие значение показателя): 4 класс: учителя – больше на 9%; учащиеся – больше на 11% 8 класс: учителя – больше на 18%; учащиеся – больше на 12% Стало меньше экономически неблагополучных семей (на 10% увеличилось число учащихся, директора которых сказали, что в их школе (до 10%) учащихся из экономически неблагополучных семей) Повод к размышлению … Естествознание - непрограммный материал Содержание программ. Содержание тестов TIMSS – результат согласования между всеми странами-участницами. Элементы внепрограммного содержания тестов TIMSS-2007 для 4 класса : Биология – наследственность, география – геологическая история Земли. Физические науки – из 16 предложенных тем не включены в наш стандарт 14 тем (70% заданий по этому разделу выходило за рамки программы). Повод к размышлению … Естествознание - непрограммный материал 4 класс: С выбором ответа – 58% Со свободным ответом – 38% 8 класс: С выбором ответа – 52% Со свободным ответом – 39% Российские выпускники начальной школы продемонстрировали самые лучшие результаты среди всех стран-участниц по 9 заданиям (7 заданий относятся к области «физические науки», 2 – к области биологии). Из 9 заданий не изучались на уроках 5! Повод к размышлению … Общие проблемы подготовки учителей - - Слабое владение диагностикой учебных достижений: выявление типичных ошибок учащихся; определение направления коррекционной работы; соотнесение трудности задания с особенностями контингента учащихся и моделирование заданий разной трудности; нахождение разных способов решения задания и обоснование наиболее рационального способа Пример 1 (международное исследование TEDS-M) Евгений замечает, что когда он набирает на калькуляторе 0,2 x 6, то ответ меньше 6, а когда набирает 6 : 0,2 , то он получает число, которое больше 6. Он озадачен этим и просит у своего учителя новый калькулятор! (а) В чём вероятнее всего заблуждается Евгений? (b) Нарисуйте наглядный образ, который учитель мог бы использовать, чтобы представить произведение 0,26 и тем самым помочь Евгению понять, ПОЧЕМУ ответ таков, какой он есть? (a) 1,3% (31%); (b) 14,2% (10,5%) – Россия (a) 20,0% (11,5%); (b) 15,9% (16,4%) – Cр. Межд. (a) 52,7% (13,3%); (b) 36,6% (33,4%) – Лидирующие страны Пример 2 (международное исследование TEDS-M, аттестационная работа для учителей начальной школы) Представьте, что вы знакомитесь с опытом преподавания арифметики в других школах. Вам предлагают следующие способы записи вычитания трехзначных чисел: Какой способ или способы можно было бы использовать, чтобы вычесть ЛЮБОЕ положительное трехзначное число из большего числа? 1. 2. 3. 4. Все три способа. Только способы A и B. Только способы B и C. Только способ B. *1. 21%; 2. 9,4%; 3. 27,6; 4. 41,3% Пример 3 (международное исследование TEDS-M) Пример 1. Ниже изображены две подарочные коробки, обвязанные лентой. Коробка A - куб со стороной 10 см. Коробка В - цилиндр, высота и диаметр которого равны по 10 см. Для какой коробки нужна более длинная лента? _____ Объясните, как вы пришли к ответу. 20,4% (21,8%) Пример 4 (международное исследование TEDS-M) Пример 2. На первом уроке при обучении детей измерению длины, учительница попросила детей измерить ширину их книг, используя скрепки, а затем используя карандаши. Укажите ДВЕ возможные причины, почему она выбрала такой прием, а не начала просто учить детей пользоваться линейкой? Причина 1: Причина 2: 2 причины: 19,% (9,1%), 1 причину – 39,4% (39%) Результаты выполнения некоторых заданий из аттестационной работы для учителей начальной школы (1536 учителей) 1. Указать примеры наиболее сложных задач из предложенного списка (48%) 2. Составить задачу того же типа, но более легкую для учащихся (68%) 3. Переформулировать вопрос, не используя слово ОБЪЕМ (44%) 4. Определить, в чем причина ошибки ученика (13%) 5. Нарисовать наглядный образ, чтобы помочь ученику понять ответ (10%) 6. Прогнозировать затруднения учащихся по отдельным типам задач ( 15-54%) Изменение качества образования при переходе из начальной в основную школу Основные показатели: По результатам исследования TIMSS 2007 1. Сравнение результатов российских выпускников начальной школы и учащихся 8 классов свидетельствует о том, что по большинству показателей результаты учащихся начальной школы лучше, чем результаты учащихся основной школы. 2. Сравнение распределения российских учащихся 4 и 8 классов по международным уровням показывает, что в основной школе процент учащихся, имеющих продвинутый уровень образовательных достижений и по математике, и по естествознанию ниже, чем в начальной школе). В лидирующих странах процент учащихся 4 и 8 классов, достигших только продвинутого уровня подготовки, выше, чем в России – 4045% по математике и 32-36% по естествознанию. Причем данные значения практически не меняются при переходе обследуемой совокупности учащихся из начальной в основную школу. Изменение качества образования при переходе из начальной в основную школу Основные показатели: По результатам исследования TIMSS 2007 3. При переходе из начальной в основную школу сокращается как общее число учащихся, показывающих удовлетворительные результаты (с 81% до 68% по математике, и с 82% до 76% по естествознанию), так и число учащихся, достигающих самых высоких уровней подготовки (с 16% до 8% по математике, и с 16% до 11% по естествознанию). Увеличивается число учащихся с низким уровнем подготовки (с 19% до 32% по математике, и с 18% до 24% по естествознанию). Причем следует отметить, что различия по математике более существенные, чем по естественнонаучным предметам. При анализе различий в результатах учащихся 4 и 8 классов по естествознанию следует иметь в виду, что доля естественнонаучных предметов в учебном плане начальной школы существенно ниже (5%), чем в основной школе (в 8 классе – 25%). Изменение качества образования при переходе из начальной в основную школу Основные показатели: По результатам исследования TIMSS 2007 4. Проблемы, выявленные на начальной ступени обучения (затруднения при интеграции и применении знаний, изложении своих мыслей в письменной форме; сложности при работе с материалом, представленным в непривычном формате), остаются и на более высокой ступени обучения, в основной школе. Но некоторые из них усиливаются, например, резко увеличивается число учащихся, не приступающих к выполнению заданий со свободным ответом или пытающихся объяснить явления из окружающей жизни. Данные факты могут свидетельствовать о проблемах в формировании самостоятельности мышления у российских учащихся основной школы. «Тяни-толкай» – измеритель динамики читательской грамотности Что делать? Искать не там, где светло… искать, где потеряно… успешность ответа на вопросы теста (в баллах,%) 80% 4 класс 6 класс 75% 70% 65% 60% 55% 50% найти и извлечь информацию из текста интегрировать и интерпретировать сообщения текста осмыслить и оценить сообщения текста Повод к размышлению … Результаты России в международных сравнительных исследованиях качества общего образования Повод к размышлению … Более эффективные школы России (по результатам исследований PIRLS, PISA и TIMSS Более крупные образовательные учреждения – с хорошей материальной базой, – c укомплектованным штатом учителей, – c хорошими образовательными ресурсами (библиотекой, лабораторным оборудованием, компьютерами и т.д.), Больше учителей, удовлетворенных своей работой Более мотивированные учащиеся Доброжелательные отношения между учащимися и учителями Высокие требования к учащимся Хорошая дисциплина и др. Повод к размышлению … Более эффективные школы России (по результатам исследований PIRLS, PISA и TIMSS Учащиеся имеют более высокие результаты, если: Они хорошо мотивированы, Не тревожны, Верят в собственные силы и способности, Владеют эффективными стратегиями обучения (включая постановку цели, выбор стратегий, самоконтроль и самооценку процесса обучения) Для дополнительной информации Исследования TIMSS, PIRLS сайт Международной Ассоциации по Оценке Учебных Достижений - IEA (International Association for the Evaluation of Educational Achievement): http:// www.iea.nl/ http://timss.bc.edu/ http://pirls.bc.edu/ ссылка на международную базу данных результатов PIRLS-2006 http://pirls.bc.edu/TIMSS2007/idb_ug.html ссылка на международную базу данных результатов TIMSS-2007 http://timss.bc.edu/pirls2006/user_guide.html Исследование PISA сайт Организации Экономического Сотрудничества и Развития - OECD (Organisation for Economic Co-operation and Development): www.oecd.org ссылки на международную базу данных результатов PISA-2000: http://pisa2000.acer.edu.au/index.php PISA-2003: http://pisa2003.acer.edu.au/index.php PISA-2009: http://pisa2006.acer.edu.au/ Исследовательский институт IEA-ETS Research Institute (IERI). Направление деятельности: совершенствование методологии исследований; подготовка специалистов; распространение результатов. ссылка на сайт: http://www.ierinstitute.org Вопросы и комментарии Ковалева Галина Сергеевна, руководитель отдела оценки качества общего образования Института содержания и методов обучения РАО Тел./факс: (499)-246-24-21 e-mail: [email protected] сайт: www.centeroko.ru