Аннотация 2 этап - Федеральная целевая программа развития

АННОТАЦИЯ
к отчету по исполнению II этапа Государственного контракта
от 07 ноября 2011 г. № 12.Р20.11.0080 по проекту
«Разработка и апробация модели и технологии создания и применения
измерительных средств в соответствии с требованиями
профессиональных стандартов для процедур оценки и сертификации
квалификаций»
Проведение анализа результатов реализации программ подготовки
тьюторов по разработке и применению измерительных средств позволило
выявить проблемные области, нуждающиеся в дополнительной разработке в
организационном, учебном и методическом аспектах.
В частности, обучение показало, что в организационном плане
необходимо четко дифференцировать тьюторов, специализирующихся в
сфере разработки измерителей от тех, кто специализируется по вопросам их
применения при сертификации сертификаций. Эти области деятельности
значительно отличаются не только в плане содержательной подготовки, но и
по организационным структурам, где будет протекать деятельность
тьюторов. Если первая группа тьюторов, специализирующаяся по проблемам
разработки
измерителей,
должна
ориентироваться
на
деятельность
экспертно-методических центров, то вторая группа, ориентированная на
процесс применения измерителей, должна работать с сотрудниками центров
сертификации квалификаций. На сегодняшний день четкой дифференциации,
связанной со спецификой будущей деятельности тьюторов, среди обученного
контингента практически не сложилось в силу того, что сами тьюторы пока
слабо представляют сферу своей будущей деятельности в сертификации
квалификаций.
В содержании обучения, где на каждую из трех программ (программа
подготовки тьюторов по разработке измерительных средств, программа
подготовки тьюторов по применению измерительных средств, программа
2
подготовки тьюторов по использованию программно-инструментального
обеспечения) отводилось всего по 40 часов, в силу недостаточного времени
не удалось с достаточной степенью подробности отразить ряд разделов и
сформировать в полной мере необходимые для тьюторов представления,
знания и умения. В состав слушателей вошли, в большинстве своем,
представители высшей школы, которые не имеют специальной подготовки
по разработке измерителей и по их применению при оценке качества
профессиональной
подготовки
или
результатов
профессионального
образования.
В частности, для тьюторов по разработке измерителей и их
применению рекомендуется ввести дополнительные 120 часов подготовки, из
которых ими должно быть прослушано и посещено не менее 80 часов с
отрывом от основной деятельности, для формирования представлений о:
 современных направлениях исследований в области педагогических
измерений;
 методологических
основах
процессов
конструирования
и
применения измерителей;
 компетентностном подходе к трактовке качества результатов
образования или результатов профессиональной деятельности;
 современных зарубежных достижениях в области сертификации
квалификаций специалистов;
 состоянии дел в сфере разработки профессиональных стандартов в
своей отрасли;
 инновационных
формах
измерителей,
адекватных
компетентностному подходу;
 разработке
тестов
практических
умений
для
сертификации
специалистов в других странах;
 статистических многомерных методах анализа данных;
 математическом моделировании в социальных науках;
3
 классической теории измерений;
 современной теории измерений и классах математических моделей;
 возможностях различных моделей современной теории измерений
применительно к анализу эмпирических данных, полученных по различным
измерителям;

методах калибровки заданий измерителей;
 возможностях адаптивного тестирования, стратегиях адаптивного
тестирования и методах их практической реализации;
 современных зарубежных подходах к разработке многостадийных
процедур измерений и тестлетах;
 факторных методах композиции содержания измерителей;
 методах разработки междисциплинарных тестов;
 уровнях педагогических измерений и сочетании данных разного
уровня;
 методах шкалирования результатов измерений, видах шкал;
 методах построения уровневых шкал;
 функционировании
системы
сертификации
качества
педагогических тестовых материалов в России.
По результатам дополнительного обучения тьютор по разработке
измерителей должен знать:
 основные понятия, категории и методы измерений в психологии и
педагогики;
 - дидактические принципы оценки подготовленности специалистов
или результатов профессионального образования;
 понятийный аппарат и основные постулаты теории измерений в
социальной сфере;
 основные методы дисперсионного, корреляционного и факторного
анализа;
4
 классификацию шкал, их достоинства и недостатки в сочетании с
уровнями измерений и их возможностями для представления данных по
сертификации квалификаций;
 виды распределений эмпирических данных;
 методы и способы вычисления статистических характеристик
распределения эмпирических данных;
 различия
крнтериально-ориентированного
и
нормативно-
ориентированного подходов к созданию теста, а также методы их
конструирования;
 критерии качества и методы оценки качества тестов в рамках
нормативно-ориентированного и критериально-ориентированного подходов
к их конструированию;
 методы и алгоритмы оценивания надежности (3 метода для
нормативно-ориентированного
и
1
метод
для
критериально-
ориентированного подходов) и валидности (содержательной, конструктной и
прогностической) результатов измерений.
При выполнении 2-го этапа проекта ФГБОУ ВПО «Государственный
университет управления»:
1. Подготовлены 65 тьюторов по разработке измерительных средств.
2. Подготовлены 65 тьюторов по применению измерительных средств.
3. Подготовлены 65 тьюторов по статистическому анализу и ведению
баз данных по измерительным материалам.
4. Проведен анализ результатов реализации программ подготовки
тьюторов
по
разработке
измерительных
средств
и
применению
измерительных средств.
5. Разработаны рекомендации по развитию программ подготовки
тьюторов.
6. Разработана учебно-методическая документация.
7. Подготовлены 2 учебных пособия.
5
Вместе с тем, по результатам проведенной работы, представляется
необходимым
отметить
проблемные
области,
нуждающиеся
в
дополнительной разработке в организационном, учебном и методическом
аспектах. В первую очередь, это:
1. Необходимость внедрения разработок в сфере программного
обеспечения, выполненных в рамках проекта, для создания и применения
измерителей при сертификации квалификаций, так как они не имеют
аналогов в отечественной практике.
2. Необходимость предварительного обучения пользователей при
внедрении, тиражировании и распространении разработанного в рамках
проекта программного обеспечения по центам сертификации квалификаций.
3. Необходимость
четкого
дифференцирования
тьюторов,
специализирующихся в сфере разработки измерителей от тех, кто
специализируется
по
вопросам
их
применения
при
сертификации
квалификаций.
4. Недостаточность 40 часовой программы для полного формирования
необходимых для тьюторов представлений, знаний и умений.
При
значительном
увеличении
числа
центров
сертификации
квалификаций необходимо проведение следующих мероприятий:
1. Обеспечение
подготовленных
наличия
кадров
в
в
сфере
каждой
отрасли
измерений,
профессионально
сотрудников
центров
сертификации квалификаций и экспертно-методических центров.
2. Введение
сертификации
измерительных
материалов
(ИМ),
используемых для сертификации квалификаций.
3. Разработка и широкое освещение в публикациях Стандартов
качества ИМ, используемых для сертификации квалификаций.
4. Создание банков калиброванных заданий для сертификации
квалификаций внутри отрасли.
5. Переход от традиционного к адаптивному тестированию при
сертификации квалификаций.
6
6. Создание программного обеспечения для разработки измерителей.
7. Создание специализированных советов для защит диссертаций в
сфере образовательных, психологических и квалификационных измерений.
Руководитель проекта - проректор
ФГБОУ ВПО «Государственный
университет управления» по развитию
учебно-методического объединения
В.И. Звонников