Разработка тестовых заданий Отдел тестирования и обучающих технологий Глоссарий • Тестовое задание (ТЗ) – минимальная содержательно законченная единица педагогического измерения, имеющая основу, в которой сформулирована задача и предписан порядок ответа; • Банк тестовых заданий (БТЗ) – логически упорядоченная совокупность тестовых заданий, прошедших апробацию и имеющих определенные характеристики (учебная дисциплина, разделы, темы, авторы, уровни трудности ТЗ и другие); • Тест – система заданий, сформированных по всему БТЗ или по отдельно взятому разделу/теме, позволяющая качественно оценить структуру и эффективно измерить уровень знаний учащихся. Рекомендации Перед началом работы над БТЗ необходимо определить: • цель тестирования (контроль знаний или самоподготовка); • форму контроля знаний (текущий, тематический, рубежный); • на каких специальностях/направлениях будет использоваться БТЗ; Структуризация БТЗ Содержательная валидность БТЗ – степень соответствия содержания БТЗ содержанию конкретной учебной дисциплины. Цель структуризации БТЗ: • четкое представление составных частей учебного материала; • Фиксирование отношений между разделами и темами учебного материала; • Установление иерархии между элементами учебного материала. Структуризация БТЗ Тезаурус – специальным образом организованный и и контролируемый словарь ключевых терминов. Спецификация БТЗ – исходное детальное описание структуры БТЗ Спецификация теста Раздел Подраздел 1. 1.1 1.2 2. 2.1 2.2 Тема Кол-во тестовых заданий Всего Откр. Закр. 1.1.1 4 1.1.2 8 2 6 1.1.3 8 2 4 1.2.1 8 1 5 1.2.2 10 2.1.1 9 2.1.2 7 5 2.2.1 5 4 2.2.2 8 Соот. Упор-е 4 6 1 1 2 2 2 7 4 2 1 2 1 3 Желательно, чтобы: • каждый БТЗ включал не менее 250 ТЗ; • Задания разных типов распределялись в БТЗ равномерно. Тестовые задания Задания закрытого типа Задания открытого типа Задания на установление соответствия Задания на установление последовательности Задание закрытого типа Состоит из неполного тестового утверждения с одним ключевым элементом и множества допустимых заключений, одно или несколько из которых являются правильными. Тестируемый определяет правильные заключения из данного множества. Пример оформления задания закрытого типа К-категория трудности А – легкое ТЗ В – средней трудности С – трудное ТЗ Сквозная нумерация ТЗ через все темы I: Задание 1 авторское имя (Ф.И.О. преподавателя, ТЗ 1.2-1, К=А;В;С) № раздела № темы № задания в этой теме S: Экономика организаций (предприятий) - это наука +: о хозяйственной жизни организации (предприятия) -: о процессах управления денежным оборотом организации (предприятия) +: о закономерностях формирования ресурсов, затрат и результатов на предприятии (организации) -:о региональном размещении производительных сил России -: о процессах управления Задание открытого типа Требует сформулированного самим тестируемым заключения на требования ТЗ. Имеет вид неполного утверждения, в котором отсутствует один или несколько ключевых элементов. В качестве одного ключевого элемента может быть число, слово или словосочетание. Пример оформления заданий открытого типа I: Задание 2 авторское имя (Ф.И.О. преподавателя), ТЗ 2.1-10, К=А;В;С S: Частичная или полная утрата основными средствами потребительских свойств и стоимости в процессе эксплуатации, бездействия или технического прогресса называется ### +: износом +: Износом +: Изн*с#$# +: изн*с#$# Задание на установление соответствия Задание должно состоять из двух групп элементов и четкой формулировки критерия соответствия между ними. Основное условие образования групп – однородность всех элементов, т.е. наличие общего для них свойства, признака. Пример оформления заданий на установление соответствия I: Задание 3 авторское имя (Ф.И.О. преподавателя, ТЗ 1.2-14, К=А;В;С) S: Соответствие между показателем и его характеристикой: L1: амортизационный фонд L2: амортизация L3: норма амортизации L4: фонд амортизация R1: особый денежный резерв, предназначенный для воспроизводства основных фондов R2: амортизация на производимую продукцию R3: норма амортизации труда, выраженное в процентах R4: Задание на установление последовательности Задание должно состоять из однородных элементов некоторой группы и четкой формулировки критерия упорядочения этих элементов. Пример оформления заданий на установление последовательности I: Задание 4 авторское имя (Ф.И.О. преподавателя, ТЗ 1.3-5, К=А;В;С) Q: Правильная последовательность дней недели 1: понедельник 2: вторник 3: среда 4: четверг 5: пятница 6: суббота 7: воскресенье Трудность • Задания легкие – задания для выявления степени усвоения дидактических единиц, образующих теоретический базис, основу учебной дисциплины. Позволяют оценить знания основных понятий, утверждений, правил, приемов и операций, связанных с качественным и количественным описанием свойств изучаемого в дисциплине предмета; Трудность • Задания средней трудности – задания для выявления степени усвоения дидактических единиц – разделов (подразделов, тем), развивающих и дополняющих базис учебной дисциплины. Позволяют оценить знание и понимание значения, смысла основных теоретических и/или практических положений, умение решать типовые (стандартные) учебные задачи. Трудность Задания трудные – задания для выявления степени усвоения системы знаний, включающей теоретическую и практическую составляющие учебной дисциплины. Позволяют оценить знание и понимание взаимосвязей между всеми разделами дисциплины, умение применять системные знания в решении прикладных (нестандартных) учебных задач. Основные правила формирования заданий Тестовое задание должно быть представлено в форме свернутого краткого суждения, сформулировано ясным, чётким языком и исключать неоднозначность заключения тестируемого на требования задания. Основные правила формирования заданий В тестовом задании не должно быть повторов, двойных отрицаний, глаголов в повелительном наклонении. В тестовом задании не должно быть обобщающих слов, таких как: «всегда», «иногда», «никогда». Формулировка тестового задания не должна начинаться с предлога, частицы, союза. Основные правила формирования заданий Каждое тестовое задание должно иметь отношение к конкретному факту, принципу, умению, знанию, т.е. обладать достаточной важностью для включения в тест. Все тестовые задания должны быть связаны с целями обучения. В тестовом задании не должно отображаться субъективное мнение или понимание отдельного автора. Основные правила формирования заданий Количество слов в тестовом задании не должно превышать 10-12, если при этом не искажается понятийная структура тестовой ситуации. Главным считается ясное и явное отражение содержания фрагмента предметной области. Основные правила формирования заданий В тексте тестового задания не должно быть непреднамеренных подсказок и сленга. Не должно быть взаимосвязанных заданий, где содержание одного задания подсказывает ответ на другое. Основные правила формирования заданий Рекомендуется соблюдать единый стиль оформления заданий, входящих в один тест. На экране во время предъявления заданий из теста не должно присутствовать никаких графических и мультимедийных элементов, не имеющих прямого отношения к пониманию содержания тестового задания. Тестовое задание должно быть составлено с учетом того, что среднее время его предъявления на экране составляет 1,5 - 2 минуты. Основные правила формирования заданий Элементы тестового задания могут содержать текст, формулы, графические изображения, мультимедийные компоненты. Аудио компоненты и видеофрагменты при визуализации тестового задания должны представляться в виде условного общепринятого и понятного тестируемому графического символа и активизироваться тестируемым (например, щелчком мыши). Завершение работы над БТЗ • Тщательная проверка правильности оформления БТЗ. • Внутрикафедральная экспертиза БТЗ. Выработка рекомендаций по доработке. Утверждение БТЗ кафедрой. • Определение перечня тестов на базе утвержденного БТЗ, задание параметров генерации тестов (временные ограничения, структура теста, способ оценивания результата и т.д.). • Передача БТЗ в Отдел тестирования и обучающих технологий. • Экспериментальная проверка тестов, модификация ТЗ, коррекция параметров генерации тестов. Служебные символы F1: Наименование БТЗ Не превышает 256 символов F2: Комментарий: состав авторского коллектива, цель создания, назначение БТЗ Заполняется в произвольной форме V1: Не превышает 256 символов V2: Наименование элементов структуры БТЗ, соответственно: V3: V1: первого уровня V2: второго уровня V3: третьего уровня I: Признак начала задания Может содержать информационные поля: авторское имя, категория трудности, мера трудности, ограничения ТЗ по времени выполнения Служебные символы Q: Формулировка задания или дополнительная информация, обеспечивающая правильное понимание содержания задания Не превышает 256 символов, может отсутствовать S: Содержание задания. Может быть как текстовой информацией тек и OLE-объект (картинка) По длине не ограничено +: Признак верного заключения Для задания открытой формы только текстовое содержание. Для задания закрытой формы может содержать текст или OLE-объект(картинку). Строка не должна превышать 256 символов. Служебные символы -: Признак для неверного заключения для заданий с выбором ответов Может содержать текстовую информацию или OLE-объект (картинку). Не должно превышать 256 символов. Ln: Признак элемента левого столбца задания на установление соответствия. Может быть текстовой информацией или OLEобъектом. n – целое число от 1 до 10. Не превышает 256 символов. Допускается одновременное присутствие OLE-объектов и текстовой информации. Rn: Признак элемента правого столбца задания на установление соответствия. Может быть текстовой информацией или OLEобъектом. n – целое число от 1 до 10. Не превышает 256 символов. Допускается одновременное присутствие OLE-объектов и текстовой информации. Наши координаты ул. Кибальчича, д.1 ком. 11С, 12С (3 этаж) Тел./факс 8-499-270-46-32, мест. 45-05 Общий e-mail: [email protected] Машникова Ольга Владимировна - [email protected] Дюба Ольга Николаевна – [email protected] Зинич Ольга Юрьевна - [email protected] Спасибо за внимание !