В режиме off-line

Информационно-программное
обеспечение тестирования
в рамках процедуры
государственной аккредитации
Пастбин Константин Юрьевич
заместитель начальника отдела педагогических измерений
Росаккредагентства
9 апреля 2010
1
Рассматриваемые вопросы
1.
2.
3.
4.
5.
Именная страница специалиста по тестированию
Режимы тестирования
Этапы процедуры тестирования
Работа с ПО для режима off-line
Возможные проблемы, внештатные ситуации
2
Именная страница специалиста по
тестированию
• перечень ОУ для
проведения тестирования
• план тестирования в ОУ
• ключи для доступа к тесткомплектам
• формы документов,
комплекты документов по
договорным отношениям
Именная страница
Тестирование
• контактная информация
для связи с ОУ
• план тестирования
• ключи для доступа к тесткомплектам
4
Именная страница
Документы
• комплекты
документов по
работе в
каждом ОУ
• памятка по
заключению
договорных
отношений
5
Режимы тестирования
тестирование
On-line
основной
подготовка
к работе
Off-line
тестирование
сбор
файлов
запасной
ПО и база заданий
загрузка на сайт для обработки
6
Режимы тестирования
Компьютерное тестирование в рамках процедуры
государственной аккредитации проводится преимущественно в режиме on-line.
Тестирование в режиме off-line используется в качестве
резервного или по обращениям образовательных
учреждений с обоснованием невозможности проведения
тестирования в режиме on-line.
7
Процедура тестирования
1.
2.
3.
4.
5.
подготовка компьютерных классов
получение тест-комплектов
проведение тестирования
проверка полноты результатов
завершение тестирования и
формирование протокола по
проведенному тестированию
6. получение ОУ результатов
8
Технические требования
Приведены на сайте и в инструкции, прилагающейся к off-line ПО.
В режиме on-line:
•
постоянное
подключение
рабочих
мест
компьютерного
класса
•
браузер Internet Explorer 5.5 и выше или Mozilla Firefox 1.5 с включенными cookies и javascript;
•
разрешение экрана от 1024х768 в режиме High/True Color.
(рекомендуемая пропускная способность канала приблизительно 30 Кбит/с на студента)
к
сети
Интернет
В режиме off-line:
•
наличие локальной сети с сервером (желательно);
•
операционная система Microsoft Windows 9x, ME, 2000, XP, 2003, Vista, Windows 7;
•
разрешение экрана 800х600 в режиме High/True Color (рекомендуемое разрешение 1024х768);
•
около 100 Мб свободного дискового пространства (в зависимости от объема базы заданий);
•
оперативной памяти не менее 64 Мб (рекомендуется 128 Мб);
•
частота процессора не ниже 233 МГц.
9
Логины и пароли для студентов
Каждому студенту на каждый сеанс тестирования (дисциплину)
выдается уникальный логин и пароль.
 Логины и пароли могут быть использованы только один раз!

10
Ключи для доступа
к логинам и паролям
на день
• открывают доступ вуза к
тест-комплектам
• располагаются на
именной странице
специалиста по
тестированию
• передаются вузу за час до
начала тестирования
• факт использования ключа
фиксируется
• отдельный ключ на
каждый день
тестирования
11
Получение доступа
к логинам и паролям
на день
• ответственный за
организацию
тестирования в вузе
вводит полученный ключ
в разделе “логины и
пароли”
12
База заданий
для запасного режима off-line
• доступ к базе открывается за день до начала
тестирования
• база формируется сразу на все дни тестирования
13
Модуль Тест-экзаменатор
• вход в систему по
индивидуальному
логину/паролю
• контроль ФИО
студента
14
Проверка полноты
получения результатов
• убедиться, что все результаты
получены
• в режиме on-line результаты
изначально располагаются на
сайте
• в режиме off-line необходимо
загрузить файлы с ответами
студентов на сайт
15
Завершение
тестирования
• после завершения тестирования
формируется протокол
• протокол подписывается специалистом по
тестированию и ректором вуза
• протокол отправляется в
Росаккредагентство факсом
16
Результаты тестирования
• результаты открываются
вузу после получения
Росаккредагентством
протокола тестирования
17
Офф-лайн тестирование
Без локальной сети
С использованием локальной сети
локальная
сеть
общая
база
ответов
технический
работник
МОД
ТЭ
база
заданий
ТЭ
ограничен
доступ студентов
• Тест-Экзаменатор
располагается на сервере
(на диске с общим
доступом)
• данные с ответами
студентов сохраняются
непосредственно на сервере
• у студентов нет прямого
доступа к базе заданий и
ответов
ТЭ
ТЭ
база
ответов
общая
база
ответов
МОД
база
заданий
база
ответов
база
заданий
база
ответов
база
заданий
ограничен
доступ студентов
• необходимо
тиражировать ТестЭкзаменатор и базу на
каждый компьютер
• необходимо собирать
данные с ответами с
каждого компьютера
• у студентов есть полный
доступ к своей базе
ответов и заданий
18
Инструкция по
работе с off-line ПО
Инструкция находится в
архиве с ПО.
•
технические требования
• порядок установки с
использованием локальной сети
и без локальной сети
• порядок сбора и отправки
результатов
• основные проблемы при
работе с ПО и пути их решения
19
Подготовка ПО
• скачать базу с тестовыми
материалами (*.pim)
• запустить Модуль обмена
данными (МОД, mod.exe)
• подготовить ТестЭкзаменатор к тестированию,
выбрав режим тестирования (с
использованием локальной
сети или без)
• появляется
папка
“TestExam” с готовым к
проведению
тестирования
модулем Тест-Экзаменатор
20
Подготовка ПО
При наличии локальной сети:
Необходимо растиражировать папку TestExam по
отдельным компьютерам, либо открыть полный
сетевой доступ к этой папке.
Для работы Тест-Экзаменатора перед началом
сеанса тестирования необходимо запустить
Сервер тестирования ("Модуль обмена
данными"). При этом результаты тестирования
будут автоматически сохраняться на компьютере,
где установлен "Модуль обмена данными".
При отсутствии локальной сети:
Необходимо растиражировать папку Testexam по
компьютерам, где планируется проводить
тестирование. Запуск Сервера тестирования не
требуется, результаты сохраняются на локальных
компьютерах. Соответственно после завершения
сеанса тестирования результаты будет необходимо
собрать и перенести на компьютер, где установлен
"Модуль обмена данными".
21
Сбор файлов с ответам студентов
•
в режиме «без использования
локальной сети» собрать файлы
с ответами студентов (*.res) со
всех компьютеров в папку
\Results;
в режиме «с использованием
локальной сети» ничего
собирать не надо
• запустить «Модуль обмена
данными» (МОД, mod.exe)
• выгрузить результаты
• после этого будет сформирован
файл *.rts, подготовленный к
загрузке на сайт
• процесс обработки
записывается в файл с
протоколом (*.log)
22
Загрузка файлов
с ответами студентов на сайт
• *.rts
файлы
загружаются вузом на
именную страницу
• на экран выдается
протокол загрузки
• приводится перечень
ранее
загруженных
файлов
23
Работа в режиме on-line
Специалист по тестированию
Образовательное учреждение
Проверка работы ПО в репетиционном
режиме
Установка ПО и базы заданий для запасного
off-line режима
Выдача ОУ ключа-пароля на день
тестирования
Контроль явки студентов
Контроль за соблюдением дисциплины и
правил
Контроль за наличием всех результатов
Заполнение и отправка протокола
тестирования
Распечатка и выдача логинов и паролей
студентам
Проведение тестирования
Заполнение и отправка протокола
тестирования
Получение результатов
24
Работа в запасном режиме off-line
Специалист по тестированию
Образовательное учреждение
Установка и проверка работы ПО в
репетиционном режиме
Скачивание и распаковка базы заданий,
подготовка Тест-Экзаменатора к работе
Выдача ОУ ключа-пароля на день
тестирования
Контроль явки студентов
Контроль за соблюдением дисциплины и
правил
Распечатка и выдача логинов и паролей
студентам
Проведение тестирования
Cбор файлов с ответами студентов
Контроль за своевременной пересылкой
данных
Контроль за наличием всех результатов
Загрузка файлов с ответами на сайт для
обработки
Заполнение и отправка протокола
тестирования
Заполнение и отправка протокола
тестирования
Получение результатов
25
Возможные технические нарушения
технологии тестирования
• Временный выход из Тест-Экзаменатора (для
использования справочных материалов, поиска в
Интернете)
• Удаленное управление копьютером (Radmin)
• Тестирование в режиме off-line вместо on-line
• Подмена файла с результатами в режиме off-line
26
Возможные проблемы
•
•
•
•
обрыв сеанса тестирования
переход в запасной режим off-line
получены не все результаты
другие типичные проблемы:
–
–
–
–
вход студента не под тем логином
“неверный логин и пароль”
“Вы уже проходили тестирование”
вход в тестирование одновременно с нескольких машин под
одним логином
– ошибка подключения к базе данных (режим off-line c
использованием локальной сети)
– проблемы с обработкой и загрузкой файлов с ответами студентов
27
Обрыв сеанса тестирования
• при обрыве сеанса тестирования логин и пароль можно
использовать повторно
• данные до сбоя ответы сохраняются
28
Получены не все результаты
• сеанс тестирования не завершен студентом
• собрали не все файлы с ответами студентов;
где искать:
• протокол тестирования (TestExam\Logs)
• протокол объединения результатов (МОД)
• протокол загрузки объединенных файлов (*.rts) на сайт
29
Спасибо за внимание!
Пастбин Константин Юрьевич
зам. нач. отдела педагогических измерений
[email protected]
телефоны: (8362) 91-90-02, 64-19-86
e-mail: [email protected]
30