Тесты, компьютерное тестирование Овчинникова Раиса Петровна Педагогический тест Основные виды тестов: — психологические (тесты интеллекта) и — педагогические (тесты достижений или тесты успешности). Педагогический тест (традиционный) — это система заданий возрастающей трудности, позволяющая эффективно измерить уровень и качественно оценить структуру подготовленности учащихся. Цель тестирования Может проводиться с целью контроля, прогнозирования, обучения и самоконтроля. Главная цель применения традиционных тестов — установить отношение порядка между испытуемыми по уровню проявляемых при тестировании знаний и на этой основе определить место (или рейтинг) каждого на заданном множестве тестируемых испытуемых. Требования к тесту Содержательная валидность: включение только тех тем, которые изучались и являются системообразующими; расположение заданий по возрастанию трудности; предложение правдоподобных ответов. Функциональная валидность (требование соответствия выявляемому уровню). Простота оформления. Тестовое задание Тестовое задание – это структурный элемент теста, сформулированный в форме утверждения, которое обращается в истинное или ложное высказывание в результате подстановки правильного или неверного ответа. Каждому заданию ставятся в соответствие ответы правильные и неправильные (дистракторы). Тестовые задания бывают открытого и закрытого типа. Принципы отбора тестовых заданий Значимость материала. Взаимосвязь содержания и формы. Содержательная правильность тестовых заданий (научная достоверность). Репрезентативность содержания учебной дисциплины в содержании теста. Комплексность и сбалансированность содержания теста. Системность содержания. Вариативность содержания. Логические требования к тестовым заданиям соразмерности объема определяющего понятия объему определяемого; Пример задание не должно содержать тавтологию, должно быть независимым; Пример задание должно иметь правильный ответ; тестовое задание должно иметь утвердительную форму; ответы должны иметь общее основание классификации; Пример содержание заданий должно быть непротиворечивым; тестовое задание должно иметь обоснованное содержание (наличие основания истинности). Другие требования к заданиям в тестовой форме краткость, все повторяющиеся слова из ответов переносятся в текст задания; адекватность инструкции форме и содержанию задания, однозначность толкования ответов, отсутствие абсурдных и очевидных ответов, ассоциаций, позволяющих угадать правильный ответ; оптимальное количество ответов – 4-5, ответы должны иметь примерно одинаковую длину, аналогичную конструкцию, грамматически согласованными с формулировкой задания, В ответах не следует использовать слова «все», «ни один из», «всегда», «никогда». Виды тестовых заданий Вид задания Свободного изложения Дополнения С альтернативным ответом Соответствия Одиночного выбора ответов Множественного выбора ответов Исключение лишнего Поиск аналогии Инструкция Ответить на поставленный вопрос Заполнить пропуск Ответить «да» или «нет» (подчеркнуть) Восстановить соответствие элементов двух списков Выбрать один правильный ответ из приведенного списка Выбрать все правильные ответы из приведенного списка Устранить лишний элемент из предложенного списка выделить отношение аналогии между парами элементов и заполнить пропуск Поиск последовательности Начать или продолжить некоторую последовательность элементов Примеры тестовых заданий ♦Задания свободного изложения Инструкция: ответьте на поставленный вопрос. Задание. Какая связь между гипотенузой и катетами в прямоугольном треугольнике? ♦Задания-дополнения Инструкция: запишите на месте пропуска подходящее слово. Задание. Площади подобных фигур относятся как _____ соответствующих линейных размеров. ♦Задание с альтернативным ответом Инструкция: подчеркните слово «да», если утверждение истинно, и слово «нет» — если утверждение ложно. Задание. Ромбом является параллелограмм, в котором: диагонали равны (да/нет); все стороны равны (да/нет); все углы равны (да/нет); диагонали взаимно перпендикулярны (да/нет); противоположные стороны равны (да/нет). Примеры тестовых заданий ♦Задание одиночного выбора ответа Инструкция: выберите среди предложенных вариантов ответа правильный. Задание. Укажите сумму всех значений параметра а, при которых уравнение (а + 10)х² –2(а – 2)х +2 = 0 имеет ровно один корень. а) –4 б) –6 в) 6 г) 10 ♦Соответствие Инструкция. Перед вами список чисел, выясните, каким множествам принадлежит каждое из этих чисел, и обведите в рамку нужные буквы. N — множество натуральных чисел; Z — множество целых чисел; Q — множество рациональных чисел; I — множество иррациональных чисел; R — множество действительных чисел. Задание Число Буква Число Буква 17 N, Z, Q, I, R 0,(3) N, Z, Q, I, R 2,3 N, Z, Q, I, R 7 N, Z, Q, I, R 0 N, Z, Q, I, R N, Z, Q, I, R 15 N, Z, Q, I, R ⅝ N, Z, Q, I, R Примеры тестовых заданий ♦Аналогия Инструкция. Какая из указанных функций должна стоять на месте пропуска? Среди приведенных вариантов ответа выберите правильный. x Задание. е относится к ln х, как 2х — к . А. x² Б. x/2 В. log2 х . Г. 2 ln х. ♦Исключение лишнего Инструкция. Подчеркните то слово, которое в указанном списке является лишним. Задание. Диагональ; медиана; радиус; биссектриса; высота; хорда. ♦Последовательности Инструкция. Запишите следующее число в указанной последовательности. Задание. 2; 5; 10; 17; 26; 37; ... . ♦Последовательности Инструкция. Запишите первый и последний элемент последовательности. Задание. ...; куб; октаэдр; додекаэдр; ... . Ошибки, недочеты 1. 2. 3. Критическая точка функции это … . Если в … диагонали перпендикулярны, то он является … . Определите все корни уравнения ( x 2 3x) 2 x 2 3x 5 ( x 1)(x 2 3x) 1) -3; 2; 3 4. 2) -3; 0; 2; 3 2) x < 1, x > 3 3) x < 1 2) 1 – простое число да / нет 3) 2 – составное число да / нет Найдите отношение площади круга и площади вписанного в него квадрата. 1) 2 : 7. 5) 2 Какие из приведенных утверждений являются ложными, а какие истинными: 1) 0 – натуральное число да / нет 6. 4) 2; 3 При каких значениях х выполняется неравенство x2 – 4x + 3 > 0? 1) 1 < x < 3 5. 3) -3; 2 2) 1 : 1 3) 4) 2 : 1 Верно ли, что при а (--; 8) (18; +) уравнение ax2 – 2(a – 12)x + 2 = 0 имеет: 1) ровно два корня 2) не имеет корней Компьютерные тесты Преимущества быстрое проведение, быстрая и без ошибок обработка, возможность быстрого получения результатов испытуемым, обеспечение стандартных условий тестирования для всех испытуемых, контроль процедуры тестирования (невозможен пропуск вопросов), возможность фиксации времени каждого ответа, наглядность и занимательность процесса (поддержка внимания с помощью цвета, звука, игровых моментов, что особенно важно для обучающих программ), легкая архивация результатов, возможность накопления и объединения тестов в батареи (пакеты программ) с единой итоговой интерпретацией, возможность проведения массовых тестирований (Интернет). Компьютерные тесты Недостатки сложность, длительность и дороговизна создания, необходимость компьютера для проведения, необходимость обучения испытуемого (навыки работы на компьютере, умение работать с КТ), пропадает индивидуальный подход к тестируемому, организационные трудности. Компьютерные тесты Недостатки обучающийся не говорит (нет перехода к речевому воспроизведению, не вырабатывается привычка четко формулировать мысли); выборочная система с ограниченным числом вариантов либо провоцирует на неверное решение, либо подсказывает правильное; не разъясняется причина возникновения ошибки, нельзя задать компьютеру вопрос, если что-то непонятно; можно, не понимая решения задачи, случайно получить правильный ответ; при неоднократном использовании одних и тех же программ можно узнать правильные ответы, и получить положительные оценки, не понимая смысла решения. Л.И.Долинер «Специфика компьютерного тестирования школьной успеваемости» Уральский государственный педагогический университет 92,5% учащихся предпочитают тестироваться с помощью компьютеров, а не с помощью традиционных тестов. Одной из важнейших причин такого выбора является уверенность учащихся в беспристрастности "проверяющего" (7,5% утверждают, что им все интересно). Компьютерные тесты должны быть адаптированы к реальному учебному процессу. Следует возложить на компьютерные тесты не только получение балла, но и выдачу детализированной картины пробелов в подготовке учащихся для организации дальнейшей коррекции. Л.И.Долинер «Специфика компьютерного тестирования школьной успеваемости» Уральский государственный педагогический университет Одно из требований к компьютерным тестам – многовариантность. Многовариантность должна быть двух типов: во-первых, по данным заданий, во-вторых, по порядку их предъявления. Реализация этого требования снимает сразу две организационные проблемы: списывание и запоминание ответов. Естественно, учащиеся также приспосабливаются: разбирают решение всех задач. Что и требуется. Компьютерные тесты должны предоставлять пользователю возможность настраивать на диагностику набора тем, но не давать доступа к коррекции контрольных заданий. Ю.В. Михеев, А.А. Никитин, М.Г. Пащенко «Новые формы применения тестирования в учебном процессе» ГНУ «Институт педагогических исследований одаренности детей РАО», Новосибирск В настоящее время значительная часть тестов составляется по принципу выбора одного из нескольких предлагаемых вариантов ответа. Таким способом удается проверить лишь поверхностный самый простой уровень математических знаний и умений. В связи с этим исключительно важным представляется поиск новых подходов к тестированию, при которых одновременно удается реализовать как задачи контроля, так и задачи обучения. Одним из таких подходов является применение многовариантных тестов, то есть таких вопросов или задач, к которым так же предлагается несколько вариантов для выбора, но среди которых может быть как один, так и несколько верных. Повышается достоверность оценки качества усвоения учебного материала по сравнению с одновариантными тестами. Ю.В. Михеев, А.А. Никитин, М.Г. Пащенко «Новые формы применения тестирования в учебном процессе» ГНУ «Институт педагогических исследований одаренности детей РАО», Новосибирск Например, если при одновариантном подходе к тестированию предлагается по четыре варианта для выбора, причем два из них практически сразу отвергаются из-за заметного расхождения с правильным результатом, то при случайном выборе шансы угадать верный ответ близки к 50%. Однако, если использовать многовариантные тесты, в которых также предлагается четыре варианта для выбора ответов, то шансы угадать набор верных ответов уже меньше 7%. Многовариантные тесты позволяют также реализовать важную обучающую функцию. Для качественной работы с такими тестами приходится осмысливать каждый из предлагаемых вариантов, устанавливать связи и соответствия между ними, вспоминать достаточно полно соответствующий теоретический материал. Таким образом, многовариантные тесты способствуют выработке таких важных качеств, как логический анализ предлагаемой задачи, полноту исследования, что необходимо не только в математике. К. Г. Кречетников, Н. Н. Черненко «Применение компьютерного тестирования для контроля знаний. Мотивационный эффект» После начала регулярного использования тестовых заданий, во всех группах обучаемых было отмечено проявление следующих положительных и довольно явно выраженных изменений в поведении: повысилась активность работы на занятии; усилился интерес к освоению существующего программного обеспечения и разработке новых программ; появился дух состязательности; увеличилось количество положительных эмоций в ходе занятия; появилось устойчивое стремление "победить" компьютер, доказав при этом наличие твёрдых знаний предмета; усилился интерес к самостоятельной подготовке. TeachMaster Программа для осуществления диагностики знаний в рамках образовательных и иных учреждений (вузы, колледжи, школы, отделы кадров предприятий и т.п.) Возможности программы: поддержка различных типов вопросов, поддержка различных типов тестов, группировка вопросов теста по темам. Число тем в тесте не ограничено, использование рисунков и ЛЮБЫХ OLE-объектов непосредственно в вопросах, полноценное форматирование описание теста и вопросов (каждый символ может быть написан своим шрифтом, цветом и т.д.), предварительный просмотр теста, экспорт теста в формат RTF (все типы вопросов, кроме свободно конструируемых), TeachMaster печать теста: только вопросы, вопросы и ответы, вопросы и ответы + правильные ответы (все типы вопросов, кроме свободно конструируемых), создание форм для «бумажного тестирования», защита теста паролем (отдельно для режимов изменения и тестирования), возможность ограничения времени тестирования, сопровождение вопросов мультимедийными файлами, число вопросов в тесте не ограничено, число вариантов ответа в каждом вопросе не ограничено, возможность копирования вопросов, шифрование и сжатие тестов, использование мыши, клавиатуры и горячих клавиш, работа с буфером обмена Windows, простой и интуитивно понятный интерфейс. TeachMaster Программа позволяет создавать вопросы следующих типов: вопросы закрытого типа: одиночный выбор; множественный выбор; ввод с клавиатуры; соответствие; указание области на рисунке. Hyper test Программа предназначена для проверки знаний (тестирования). В отличии от других программ, она обладает следующими характерными свойствами: возможно включение базы с 1024 вопросами; количество ответов на вопрос - до 20; можно выбирать несколько ответов; можно возвращаться к предыдущим вопросам; гибкая система оценки; просмотр и печать протокола тестирования; и др. Первые версии программы, как тестовые будут условно бесплатными, в будущем намечается переход на коммерческую основу. Автор программы - Рыбалкин К.Г. (Караганда, Казахстан). Все права на программу HyperTest принадлежат только автору. Hyper test Адаптирован к математике: набор формул, вставка рисунков Так выглядит один из вопросов (язык HTML) в базе данных \Среди следующих одночленов укажите подобные:<br> 1) x<SUP>2</SUP>; 2) y<SUP>2</SUP>, 3) -x<SUP>2</SUP>. -одночлены 1 и 2; -одночлены 2 и 3; +одночлены 1 и 3; -одночлены 1, 2, 3; -среди данных одночленов нет подобных. \/ Hyper test Обладает следующими характерными свойствами: возможно включение базы с 1024 вопросами; количество ответов на вопрос - до 20; можно выбирать несколько ответов; можно возвращаться к предыдущим вопросам; гибкая система оценки; просмотр и печать протокола тестирования; и др. Hot Potatoes Hot Potatoes : виды заданий Викторина (JQuiz) Заполнение пропусков (JCloze) Установление соответствий (JMatch) Кроссворд (JCross) Восстановление последовательности Включение текста в упражнения Hot Potatoes : викторина 1 Hot Potatoes : викторина 2 Hot Potatoes : викторина 3 Hot Potatoes : викторина 4 Hot Potatoes : пропуски Hot Potatoes : соответствия Hot Potatoes : соответствия Hot Potatoes : кроссворды Hot Potatoes : кроссворды Hot Potatoes : последовательности Hot Potatoes : последовательности Hot Potatoes : последовательности GeoGebra http://asemjonova.blogspot.com/2010/10/geogebra.html Создание тестов в программе GeoGebra (Анна Семенова, Таллинн) http://jankax.livejournal.com/tag/%D0%A2%D0%B5%D1%81%D1%82%D0 %B8%D1%80%D0%BE%D0%B2%D0%B0%D0%BD%D0%B8 %D0%B5 Примеры тестов Ивана Храповицкого Спасибо за внимание! Овчинникова Раиса Петровна доцент кафедры методики преподавания математики Поморского государственного университета имени М.В. Ломоносова Дисциплины: Технические и аудиовизуальные средства обучения НИТ в обучении математике E-mail: [email protected]