Разработка и применение тестовых форм в новых образовательных технологиях на

Разработка и применение тестовых форм
в новых образовательных технологиях на
примерах дисциплин «Методика
преподавания информатики»
и «Система баз данных»
Давлетова Айнаш Халиуллиновна
[email protected]
Внешняя оценка учебных достижений (ВОУД)
Задачи ВОУД:
-осуществление мониторинга учебных достижений обучающихся;
- оценка эффективности организации учебного процесса;
- проведение сравнительного анализа качества образовательных услуг,
предоставляемых организациями образования.
Внешняя оценка учебных достижений
высшего образования
Участники
Форма
проведения
Дисциплины
Форма
тестовых
заданий
ПГК
ВОУД
2(3) курсы вузов
Выпускной курс вузов
Бланочное тестирование
4
(ОК ГОСО)
ООД и БД
4
(ОК ГОСО)
БД и ПД
Один(1) правильный ответ из
пяти (5) предложенных
Несколько (1-3) правильных
ответов из числа
предложенных
Количество
тестовых
заданий
25
по каждой дисциплине
Время
тестирования
150 минут
Результаты проведенного анализа
Разработка всякого теста начинается с выбора содержания и
подходящей формы.
Формы заданий
1 форма
2 форма
3 форма
4 форма
Формы тестовых заданий
ЗАКРЫТОЙ ФОРМЫ
НА УСТАНОВЛЕНИЕ
ПРАВИЛЬНОЙ
ПОСЛЕДОВАТЕЛЬНОСТИ
ТЕСТОВЫЕ
ЗАДАНИЯ
НА УСТАНОВЛЕНИЕ
СООТВЕТСТВИЯ
ОТКРЫТОЙ ФОРМЫ
Требования к заданиям в тестовой
форме:
логическая форма высказывания;
правильность формы;
краткость;
правильность расположения элементов
задания;
одинаковость правил оценки ответов;
адекватность инструкции форме и
содержанию задания
Форма заданий правильная, если она
• позволяет точно выразить содержание
• понятна для всех испытуемых,
• позволяет дать оценку по заранее
разработанным решающим правилам.
1 форма
Задания с выбором одного или нескольких
правильных ответов
Такие задания интересны обучающимся. Они труднее
заданий с выбором только одного правильного ответа,
оценивают знания полнее, глубже и точнее.
Этим заданиям предшествует инструкция:
Вашему вниманию предлагаются задания, в которых
могут быть один, два, три и большее число
правильных ответов. Нажимайте на клавиши с номерами
всех правильных ответов:
2 форма
Задания открытой формы
Задания, в которых правильный ответ надо
дописать; обычно это одно слово, или один
знак.
Заданиям этой формы предшествует
стандартная инструкция – Дополнить:
3 форма
Задания, состоящие из элементов
двух столбцов. (на установление
соответствия)
Таким заданиям
предшествует инструкция
– Установить
соответствие:
4 ФОРМА
Задания проверяют знание
правильной последовательности.
Используется инструкция
«Установить правильную
последовательность»:
ТРЕБОВАНИЯ
1) Задание должно быть закрытого типа.
2) Максимальное количество правильных ответов не должно превышать 3.
3) Правильные ответы не должны повторяться.
4) Формулировка вопросов должна быть приемлемой для разного
количества правильных ответов. (такие задания обозначить под грифом:
«Универсально»
5) В случае, если задание предполагает полноту ответа тестируемого, то
обозначить под грифом «Не универсально»
Форма тестовых заданий ВОУД ВО
3/8
1
2
3
прави
льный
прави
льный
прави
льный
ответ
ответ
ответ
Универсальные
Универсальные
Не универсальные
ТРЕБОВАНИЯ
7) Время, затрачиваемое на выполнение задания, - не больше 1,5
минуты.
8) Задание должно быть представлено в форме краткого суждения,
сформулированного четким языком и исключающего неоднозначность
заключения тестируемого.
9) Запрещается наличие повторяющихся фраз в дистракторах. Лучше
длинный вопрос и короткие ответы, чем наоборот.
10) В формулировке задания не должно быть повелительного
наклонения (назовите, определите, укажите, найдите лишнее).
11) Ответ на задание должен быть однозначным. Не допустимы ответы
типа: <Да>, <Нет>, <Верно>, <Неверно>, <Все ответы верны>, <Все ответы
не верны>, <Среди предъявленных нет верного ответа>, <Правильного
ответа нет>, <Все выше перечисленное>, <Все ниже перечисленное>,
<Пожалуйста…>, <Будьте добры …>.
ТРЕБОВАНИЯ
9. Не допустимы ответы типа: <Да>, <Нет>, <Верно>, <Неверно>, <Все ответы верны>,
<Все ответы не верны>, <Среди предъявленных нет верного ответа>, <Правильного
ответа нет>, <Все выше перечисленное>, <Все ниже перечисленное>,
<Пожалуйста…>, <Будьте добры …>.
10) Задание должно быть составлено стилистически и орфографически грамотно.
11) Все варианты ответов должы быть сопоставимы по длине и, желательно, не
превышали одной строки.
12) Содержание задания должно полностью соответствовать рекомендуемой литературе,
а также действующим нормативно-правовым актам с конкретным указанием
источника.
13) Задание должно оценивать уровень владения материалом, а не выяснять мнение
тестируемого по поводу изученного материала.
14) В задании должен быть выдержан единый стиль представления. Ответ должен быть
логическим завершением поставленного вопроса.
15) В заданий не должно быть заведомо ложных ответов, содержащих подсказку, а также
явно выделяющихся, обособленных ответов.
16) В задании не должно быть противоречий, спорных моментов и отрицаний.
17) Задания не должны повторяться.
Критерии уровней сложности тестовых заданий
1 уровень – легкий – проверка знания основных определений,
формул, законов, принципов, последовательности фактов, событий,
знание схем, гистограмм и т.д.;
2 уровень – средний – выявление результатов, превосходящих
простое запоминание: понимание и интерпретация фактов, правил,
принципов; решение задач, требующих творческого осмысления
всей дисциплины и ее разделов: решение задач с применением
формул, умение находить последовательные взаимосвязи и сходство
в изучаемых явлениях, процессах, сбытиях);
3 уровень – сложный – выявление результатов, требующих более
высокого уровня владения материалом, чем понимание,
позволяющих определить научно-исследовательские способности
тестируемого, т.е. умение предположительно описывать будущие
последствия, вытекающие из имеющихся данных; применение
законов
в конкретных практических ситуациях; умение
критически оценить изучаемый материал, представить его в
графиках, схемах, эскизах.
Примеры ошибок при разработке
тестовых заданий
Как НЕ ДОЛЖНО быть?
Как ДОЛЖНО быть?
При каком подходе абсолютной
ценностью является не отчуждённые от
личности знания, а сам человек?
Подход, при котором абсолютной
ценностью является не отчуждённые от
личности знания, а сам человек:
Выберите из приведенных ниже
определение, которое характеризует
понятие “личность”:
Определение, которое характеризует
понятие “личность”:
Что включает в себя понятие
“личность”:
Понятие “личность”включает в себя:
Негізгі педагогикалық ұғымды атаңыз?
Негізгі педагогикалық ұғым:
Кому принадлежит труд «Детская
психология»?
Автор труда «Детская психология»:
Примеры ошибок при разработке
тестовых заданий
Как НЕ ДОЛЖНО быть?
Как ДОЛЖНО быть?
В свойством учебной деятельности
происходят какие в самом человеке
изменеие?
Соблюдайте стилистическую и
орфографическую грамотность !
Из перечисленного найдите, что
входит в состояния учебной
деятельности?
В состояние учебной деятельности
входит:
Эстетикалық циклдағы пәндердi
көрсетiңiз.
Эстетикалық циклдағы пәндер:
Диагностика на уроке – это … всех
обстоятельств, от которых зависит
качество урока.
Ответы в задании должны быть
логическим завершением
поставленного вопроса!
Какие методы влияют на
информационное формирование
сознания?
Методы, влияющие на
информационное формирование
сознания:
Примеры типичных ошибок при разработке
Не правильнотестовых заданийПравильно
$$$015
При проектировании схемы реляционной БД можно
выделить следующие процедуры
А) Графически изображаемая ассоциация
В) Множеству сущностей отвечает набор атрибутов
С) Определение перечня таблиц и связей между ними
D) Наиболее распространены бинарные связи
Е) Элементы этих видов описываются вершинами графа
F) Установление индексирования для полей в таблицах
G) Установление ограничений целостности для таблиц и
связей
H) ER модель допускает связи охватывающие произвольное
количество сущностей
{Правильный ответ: }= B,F,G
{Сложность }=2
{Учебник }= Карпова Т. «Базы данных: модели, разработка,
реализация» Учебник для вузов 1-е изд. 2008 – 304 стр.
Хомоненко А.Д., Цыганков В.М, Мальцев М.Г. Базы данных:
Учебник для высших учебных заведений / Под ред. Проф.
А.Д.Хомоненко. – 4-е изд., доп. и перераб. – СПб.: КОРОНА
принт, 2010. – 736 с
{Характеристика}=
$$$015
Процедуры, осуществляемые при проектировании схемы
реляционной БД :
А) Графически изображаемая ассоциация
В) Множеству сущностей отвечает набор атрибутов
С) Определение перечня таблиц и связей между ними
D) Наиболее распространены бинарные связи
Е) Элементы этих видов описываются вершинами графа
F) Установление индексирования для полей в таблицах
G) Установление ограничений целостности для таблиц и
связей
H) ER модель допускает связи, охватывающие произвольное
количество сущностей
{Правильный ответ } = B,F,G
{Сложность}=2
{Учебник}= Карпова Т. «Базы данных: модели, разработка,
реализация» Учебник для вузов 1-е изд. 2008 – 304 стр.
Хомоненко А.Д., Цыганков В.М, Мальцев М.Г. Базы данных:
Учебник для высших учебных заведений / Под ред. Проф.
А.Д.Хомоненко. – 4-е изд., доп. и перераб. – СПб.: КОРОНА
принт, 2010. – 736 с
{Характеристика}=
Примеры типичных ошибок при разработке
Не правильнотестовых заданийПравильно
$$$007
В каком году Э.Ф. Кодд опубликовал
статью о реляционной модели данных,
позволяющей устранить недостатки
сетевых и иерархических моделей:
A) 1969 году
B) 2013 году
C) 1976 году
D) 1965 году
E) 1971 году
F)1967 году
{Правильный ответ: }= А
{Сложность }=1
{Учебник }=
{Характеристика}=0
$$$007
Статья о реляционной модели данных,
позволяющей устранить недостатки
сетевых и иерархических моделей,
опубликована Э.Ф. Коддом в:
A) 1969 году
B) 2013 году
C) 1976 году
D) 1965 году
E) 1971 году
F)1967 году
{Правильный ответ} = А
{Сложность} = 1
{Учебник} =
{Характеристика} = 1
Примеры типичных ошибок при разработке
Не правильнотестовых заданийПравильно
2. Свойства товаров удовлетворять
потребностям общества или обладать
совокупной общественной стоимостью –
это … свойства
A. функциональные
B. эстетические
C. экологические
D. технические
E. эффективности
F. эргономические
G. стоимостные
H. социальные
Ответ: Н
{правильный ответ}= А,В,Е
{сложность}= 2
Свойства товаров удовлетворять
потребностям общества или обладать
совокупной общественной стоимостью:
A) функциональные
B) эстетические
C) экологические
D) технические
E) эффективности
F) эргономические
G) стоимостные
H) социальные
{Правильный ответ} = А, В, Е
{Сложность} = 2
{Учебник} =
Примеры типичных ошибок при разработке
Не правильнотестовых заданийПравильно
Ақпараттық жүйе дегеніміз:
A) қойылған мақсатқа жетуде ақпаратты сақтау, өңдеу
және шығару үшін қолданылатын құралдар, әдістер
және тұлғалардың өзара байланысқан тобы
B) кез келген объект, ол біруақытта бірбүтін және
қойылған мақсатқа жету үшін әртүрлі элементтердің
жиынтығы ретінде қарастырылады
C) ақпаратты топтастыру жңне кодтаудың бірыңғай
жүйесінің, құжаттандырудың бірыңғай жүйелерінің,
ұйымдағы айналып жүретін ақпараттық ағындар
схемаларының, сондай-ақ деректер базасын құру
методологиясының жиынтығы
D) ақпараттық жүйенің жұмыс істеуі үшін қажетті
техникалық құралдар жиынтығы, сондай-ақ осы
құралдар мен технологиялық процесстер үшін сәйкес
құжаттар
E) ақпараттық жүйелердің мақсаттары мен
мәселелерін, сондай-ақ техникалық құралдардың
жиынтығының дұрыс қызмет атқаруы үшін қажетті
математикалық әдістер, модельдер, алгоритмдер және
программалар жиынтығы
Ақпараттық жүйе:
А) Ақпаратты сақтау, өңдеу және
шығару үшін қолданылатын
құралдар
В) Әртүрлі элементтердің жиынтығы
ретінде қарастырылатын обьект
С) Деректер базасын құру
методологиясының жиынтығы
D) Техникалық құралдар мен тех
процестер үшін арналған құжаттар
Е) Модельдер, алгоритмдер және
программалар жиынтығы
Примеры типичных ошибок при разработке
Не правильнотестовых заданийПравильно
Теориялық информатика нені
зерттемейді:
A) жалпы ақпараттар теориясы
В) жасанды интеллект жүйесін
С) цифрлы автоматтар теориясы
D) ақпараттандыру құралдары
E) алгоритмдер теориясы
F) ақпараттықмодельдеу
Теориялық информатика зерттейді:
A) Жалпы ақпараттар теориясын
В) Жасанды интеллект жүйесін
С) Цифрлы автоматтар теориясын
D) Ақпараттандыру құралдарын
E) Алгоритмдер теориясын
F) Ақпараттық модельдеуді
При исключении 1 или 2 правильных ответов из имеющихся 3,
корректность тестового задания не сохраняется.
Такие тестовые задания называются неуниверсальными
и обозначаются при формировании тестового задания нулем (0)
Напротив параметра {Характеристика} = 0
Ауру анамнезіне кіретін мәліметтер:
А) Ауырсыну сезімінің айқындылығы
B) Шағымдар
C) Дерттің басталу уақыты
D) Салыстырмалы диагностика
E) Жасы, туысқандары жөнінде мәліметтер
F) Дерттің даму себептері
G) Ауырсу сезімінінң ұзақтығы
H) Бұрын емделгендігі және оның нәтижесі
{Правильный ответ} = С, F, H
{Сложность} = 1
{Учебник} = Оразалин Ж.Б., Төлеуов Қ.Т.
Хирургиялық стоматология. – Алматы, 1998. – 368
бет
{Характеристика} = 0
{Курс} = 5
{Семестр} = 9
Бір түбірлі тісті жұлу кезеңдері:
А) Науқасты ыңғайлы отырғызу
B) қысқышты тіс сауытына апару, қызылек
қалташығына қысқыштың ұрттарын енгізу
C) қысқыштың ұрттарымен тіс сауытын ұстап,
бекіту
D) Науқастың шағымын жинақтау
E) Клиникалық зерттеулер жүргізу
F) Науқаспен танысу
G) Тісті өз өсі бойымен жұлу
H) Науқастың ауру анамнезімен танысу
{Правильный ответ} = В, C, G
{Сложность} = 1
{Учебник} = Оразалин Ж.Б., Төлеуов Қ.Т.
Хирургиялық стоматология. – Алматы, 1998. – 368
бет
{Характеристика} = 0
{Курс} = 5
{Семестр} = 9
При исключении 1 или 2 правильных ответов из имеющихся 3,
корректность тестового задания должна сохраниться.
Такие тестовые задания называют универсальными
и обозначаются при формировании тестового задания единицей (1)
Напротив параметра {Характеристика} = 1
$$$002
Типы ожирения по внешнему
проявлению:
A) Гипертрофический
B) Гиперпластический
C) Дистрофический
D) Верхний
E) Средний
F) Нижний
G) Срединный
H) Идиопатический
{Правильный ответ} = D, E, F
{Сложность} = 1
{Учебник} = Струков А.М. Серов В.В.
Патологическая анатомия. Учебник
М.Медицина, 1995г. – 688 с.
{Характеристика} = 1
{Курс} = 5
{Семестр} = 9
$$$002
Типы ожирения по внешнему
проявлению:
A) Гипертрофический
B) Гиперпластический
C) Дистрофический
D) Верхний
E) Срединный
F) Идиопатический
{Правильный ответ} = D
$$$002
Типы ожирения по внешнему
проявлению:
A) Гипертрофический
B) Гиперпластический
C) Дистрофический
D) Верхний
E) Средний
F) Срединный
G)Идиопатический
{Правильный ответ} = D, E
$$$002
Типы ожирения по внешнему проявлению:
A) Гипертрофический
B) Гиперпластический
C) Дистрофический
D) Верхний
E) Средний
F) Нижний
G) Срединный
H) Идиопатический
{Правильный ответ} = D, E, F
При исключении 1 или 2 правильных ответов из имеющихся 3,
корректность тестового задания должна сохраниться.
Такие тестовые задания называют универсальными
и обозначаются при формировании тестового задания единицей (1)
Напротив параметра {Характеристика} = 1
$$$001
Виды сосудистого гиалина:
A) Простой гиалин
B) Старческий гиалин
C) Сложный гиалин
D) Атеросклеротический гиалин
E) Ангиогиалин
F) Липогиалин
G) Фибриллярный гиалин
H) Белковый гиалин
{Правильный ответ} = A, C, F
{Сложность} = 1
{Учебник} = Струков А.М. Серов В.В.
Патологическая анатомия. Учебник
М.Медицина, 1995г. – 688 с.
{Характеристика} = 1
{Курс} = 5
{Семестр} = 9
$$$001
Виды сосудистого гиалина:
A) Простой гиалин
B) Старческий гиалин
C) Атеросклеротический гиалин
D) Ангиогиалин
E) Фибриллярный гиалин
F) Белковый гиалин
{Правильный ответ} = A
$$$001
Виды сосудистого гиалина:
A) Простой гиалин
B) Старческий гиалин
C) Сложный гиалин
D) Атеросклеротический гиалин
E) Ангиогиалин
F) Липогиалин
G) Фибриллярный гиалин
H) Белковый гиалин
{Правильный ответ} = A, C, F
$$$001
Виды сосудистого гиалина:
A) Простой гиалин
B) Старческий гиалин
C) Сложный гиалин
D) Атеросклеротический гиалин
E) Ангиогиалин
F) Фибриллярный гиалин
G) Белковый гиалин
{Правильный ответ} = A, C
Пример универсальных заданий
параметр {Характеристика} = 1
$$$005
Үшкіл жүйкенің 2 тармағының невралгиясы. Ауырсыну
сезімі аймақтарға тарқалады:
A) беттің ұрт бөлігіне
B) бет-әлпеті бөлігіне
C) беттің маңдай бөлігіне
D) беттің жоғарғы бөлігіне
E) беттің ортаңғы бөлігіне
F) беттің төменгі бөлігіне
G) бүкіл ағзаға
H) бүкіл бетке
{Правильный ответ} = A, B, E
{Сложность} = 2
{Учебник} = Хирургиялық стоматология, Оразалин
Ж.Б., Алматы-1998 ж.,бет-279
{Характеристика} = 1
{Курс} = 5
{Семестр} = 9
$$$004
Балалар организмінің өсіп дамуының
заңдылықтары:
А) Өсіп даму қарқынының тұрақсыздығы
В) Дене дамуын бағалау
С) Анатомиялық өзгерістер
D) Әрбір жастың өзіндік анатомиялық және
физиологиялық ерекшеліктері
E) Физиологиялық өзгерістер
F) Балалар мен жасөспірімдер сырқаттарын анықтау
G) Жастық валеология
H) Жыныстық ерекшеліктері
{Правильный ответ} = A, D, H
{Сложность} = 1
{Учебник} = Кучма В.Р. Гигиена детей и подростков:
Учебник / Под ред. В.Р.Кучма. - М.: ГЭОТАР-МЕДИА,
2012.- 16с. «Балалар мен жасөспірімдер гигиенасы»
{Характеристика} = 1
{Курс} = 5
{Семестр} = 9
Ошибки при подборе ответов
Орган, рассматривающий успеваемость и поведение учащихся:
A) Собрание учителей
B) Педагогический совет
C) Педагогический консилиум
D) Собрание родителей
E) Все ответы верны
Текст в WORD нельзя выровнять:
A) По ширине
B) По центру
C) По правому краю
D) По центру
E) По левому краю
Ошибки при подборе ответов
Три исторических типа мировоззрения:
A) Наука, религия, искусство
B) Мифология, религия, философия
C) Философия, политика, право
D) Философия, наука, искусство
E) Все выше перечисленное
В каком году был издан труд Д.Б.Эльконина «Вопросы психологии
учебной деятельности младших школьников»?
A) 1962 г
B) 1963 г
C) 1961 г
D) 1960 г
E) Нет верного ответа
Форма тестовых заданий
Конституционное право РК
Конституционное право РК – это:
A) Ведущая отрасль национальной системы права
B) Ядро национальной системы права
C) Совокупность всех законодательных актов
D) Комплексная отрасль права
E) Совокупность конституционно-правовых норм
F) Свод законов страны
G) Все отрасли права в совокупности
H) Сборник конституционных законов
{Правильный ответ} = A, В, Е
Форма тестовых заданий
Психология
Понятие «личность»:
A) То особенное, что отличает человека от другого человека
B) Совокупность прижизненно выработанных свойств и качеств,
характеризующих его общественную сущность
C) Сущность, высшую ступень развития живых организмов на Земле
D) Человека, обладающего сознанием и мышлением
E) Отдельно взятого человека
F) Человек как целостная единица, представитель рода
G) Субъект отношений и сознательной деятельности, способный к
самопознанию
H) Устойчивая система качеств, отношений, планов, мотивов и установок
{Правильный ответ} = B, G, H
Форма тестовых заданий
Экономическая теория
Составляющие оборотных производственных фондов:
A) Производственные запасы
B) Незавершенное производство
C) Расходы будущих периодов
D) Средства в кассе
E) Средства на расчетных счетах
F) Здания и сооружения
G) Оборудование
H) Дебиторская задолженность
{Правильный ответ} = A, B, C
Форма тестовых заданий
Экономическая теория
Финансы это:
A) экономическая категория
B) деньги
C) совокупность фондов
D) денежный платеж
E) национальное богатсво
F) часть национального дохода
G) резервный фонд
H) государственный фонд
{Правильный ответ} = A, D, F
О форме тестовых заданий
 Внедрение тестовых заданий
нового формата:
(из 8 дистракторов выбор 3
правильных ответов)
 Преимущества заданий с выбором
3 правильных ответов:
Снижение угадываемости
правильного ответа
Наиболее глубокий срез проверки
знаний
Исключение субъективизма в
оценивании
 Оценивание:
3 правильных ответа – 2 балла
2 правильных ответа - 1 балл
1 правильный ответ - 0 баллов
Спасибо
за внимание!