Мониторинг и экспертно-методологическое сопровождение формирования системы сертификации профессиональных

Мониторинг и экспертно-методологическое
сопровождение формирования системы
сертификации профессиональных
квалификаций, разработка и апробация
системы аккредитации центров
сертификации профессиональных
квалификаций
Агентство Промышленной Информации
Цели и задачи проекта (1)
Цель проекта
Формирование условий для совершенствования
региональных систем сертификации
профессиональных квалификаций. Разработка, на
основе выявленного, описанного и
проанализированного опыта реализации модельных
(пилотных) центров сертификации и оценки
профессиональных квалификаций требований и
рекомендаций по аккредитации центров
сертификации и оценки профессиональных
квалификаций и методических рекомендаций по их
усовершенствованию.
Цели и задачи проекта (2)
Задачи
•
Мониторинг и экспертное сопровождение внедрения различных
моделей организации системы сертификации и оценки
профессиональных квалификаций с учетом отраслевой и
региональной специфики в 12 пилотных центрах сертификации
и оценки и 12 экспертно-методических центрах и иных
институтах, создаваемых в рамках мероприятия 8.1.
• Получение объективированных, качественных и
количественных оценок результативности и эффективности
применения в различных регионах и отраслях моделей
организации сертификации и оценки профессиональных
квалификаций для последующего тиражирования и
распространения эффективных и апробированных моделей.
Цели и задачи проекта (3)
Задачи
• Разработка вариантов распространения
(тиражирования) апробированных моделей, в т.ч.
региональный, кластерный, отраслевой и пр. (не
менее 3-х вариантов).
• Разработка критериев и процедур аккредитации
центров сертификации и оценки профессиональных
квалификаций.
Цели и задачи проекта (4)
Неформальная формулировка
• Создать экран, на котором бы отражалось
содержательное продвижение участников
• На анализе полученного опыта к 2013 г.
разработать систему аккредитации центров
Карта проводимых мероприятий
4 региона:
•
•
•
•
Москва
Ивановская область
Ростовская область
Ленинградская область
Объекты мониторинга (1)
Исполнители пилотных проектов
•
•
•
•
•
•
•
•
ООО «Центральное бюро нормативов по труду»;
ГОУ ВПО «МЭИ ТУ»;
ГОУ ВПО «МГПУ»;
ОООР «СоюзМаш России»;
ФГБОУ ВПО «РГУТиС»;
ФГБОУ ВПО НИЯУ «МИФИ»;
ГОУ ВПО «РГУ нефти и газа»;
ФГБОУ ВПО «МАТИ – Российский государственный
технологический университет имени К.Э.
Циолковского»;
Объекты мониторинга (2)
Исполнители пилотных проектов
•
•
•
•
•
•
•
•
•
ГОУ ВПО «ММУ имени И.М. Сеченова»;
НО «Фонд инфраструктурных и образовательных программ»;
ОАО «ОАК»;
ФБГОУВПО «РГУПС»;
ФБГАОУВПО НИТУ «МИСИС»;
ГОУ ВПО «МГЮА»;
«НИИ труда и соцстрахования Минздравсоцразвития РФ»;
ООО «Агентство гуманитарных технологий»;
АНО «Национальное агентство развития квалификаций»
(НАРК);
• ЗАО «Россервис».
Объекты мониторинга (3)
Исполнители пилотных проектов
• Ивановский государственный энергетический
университет;
• МАДИ;
• ООО «Союз машиностроителей России»;
• РАНХиГС;
• ООО «КАЦИТ»;
• ГОУ ВПО «ГУУ»;
• ГОУ ВПО «Санкт-Петербургский государственный
электротехнический университет «ЛЭТИ им.
В.И.Ленина»;
Объекты мониторинга (4)
Типы объектов
ЦОСК
Проект
ЭМЦ
(сопровождение
системы
сертификации)
Институциональное поле
Функциональная узлы:
• Разработка и актуализация
профессиональных стандартов
• Разработка и актуализация СИМов
• Экспертиза квалификации соискателя
• Присвоение квалификации (Сертификация)
• Разбор претензий и конфликтов
• Отбор и подготовка экспертов-оценщиков
• Ведение архива и реестра
Разработка и актуализация
профессиональных стандартов
Разработка
Легитимизация
стандартов
Актуализация
стандартов
Хранение
(«Держание»)
Разработка СИМ
Разработка
Легитимизация
Инструмента и процедуры
Хранение
/распространение
(«Держание»)
Экспертиза квалификации
соискателя и сертификация
Входящий контроль
Процедура экзамена
Принятие решения
t
Создание и ведение архива
 выданные дипломы,
 экзаменационные документы,
 принятые решения
Подготовка экспертов-оценщиков
Профстандарты
Разбор
претензий и
конфликтов
Экспертиза
квалификации
соискателя
СИМ
Экспертыоценщики
Профстандарты
Сертификация
Экспертыоценщики
Ведение архива
Профстандарты
Исследовательские процедуры и
методы
• Изучение и экспертиза отчетов и выходных
продуктов проектов
• Участие в мероприятиях партнеров
• Анкетирование участников проектов
• Экспертные интервью с представителями
заинтересованных сторон
• Анализ СМИ и интернет ресурсов
• Анализ нормативных актов и ведомственных
документов
• Проведение экспертных семинаров
В ходе выполнения проекта были
проведены следующие работы (1):
• Построено формализованное описание и проведен анализ
моделей деятельности центров сертификации и оценки
профессиональных квалификаций
• Проведен анализ прототипов и опыта деятельности центров
сертификации и оценки профессиональных квалификаций
• Описаны и проанализированы ситуации и существующих
механизмов сертификации и оценки профессиональных
квалификаций в регионах и отраслях экономики, в которых
создаются центры
• Определены первичные перечни показателей и индикаторы
реализации проектов создания центров сертификации и оценки
профессиональных квалификаций.
• Определен набор необходимых первичных данных для расчета
значений индикаторов.
В ходе выполнения проекта были
проведены следующие работы (2):
•
•
•
•
•
•
•
Согласован с заинтересованными сторонами первичный перечень
показателей и индикаторов реализации проектов создания центров
сертификации и оценки профессиональных квалификаций
Построено формализованное описания моделей деятельности пилотных
экспертно-методических центров.
Проведен анализ прототипов и опыта деятельности пилотных экспертнометодических центров.
Определен первичный перечень показателей и индикаторов пилотных
экспертно-методических центров
Определен набор необходимых первичных данных для расчета значений
индикаторов.
Согласован с заинтересованными сторонами первичный перечень
показателей и индикаторов реализации проектов создания экспертнометодических центров.
Построено формализованное описание проектов, реализуемых в рамках
мероприятия 8.1. ФЦПРО.
В ходе выполнения проекта были
проведены следующие работы (3):
• Определен первичный перечень показателей и индикаторов
реализации проектов, реализуемых в рамках мероприятия 8.1.
• Определен набор необходимых первичных данных для расчета
значений индикаторов.
• Согласован с заинтересованными сторонами первичный
перечень показателей и индикаторов реализации проектов,
реализуемых в рамках мероприятия 8.1.
• Разработаны процедуры сбора информации для расчета
значений индикаторов мониторинга.
• Разработаны процедуры верификации первичной информации
для расчета значений индикаторов мониторинга.
• Сформированы и согласованы с Рособрнадзором и
заинтересованными сторонами в регионах реализации
пилотных проектов системы мониторинговых мероприятий для
каждого пилотного проекта.
В ходе выполнения проекта были
проведены следующие работы (4):
• Сформированы и согласованы с Рособрнадзором Концепции
системы визуализации хода и результаты реализации пилотных
проектов в рамках мероприятия 8.1 в режиме реального
времени.
• Сформировано и согласовано техническое задание на
создание программного компонента системы визуализации
• Разработана первая версия программного компонента системы
визуализации
• Разработаны пользовательские инструкции и регламенты
работы с системой.
• Обучен персонал Рособрнадзора и иных пользователей
системы.
• Запущена система визуализации в тестовом режиме.
• Проведено организационное проектирование мониторинговых
сессий
В ходе выполнения проекта были
проведены следующие работы (5):
• Был проведен сбор первичных данных для расчета значений
индикаторов
• Был произведен расчет значений индикаторов
• Проведена верификация собранных первичных данных
• Проведено организационное проектирование оценочноаналитических сессий
• Проанализированы системные эффекты от внедряемых
моделей деятельности центров сертификации и оценки
профессиональных квалификаций.
• Произведен анализ сравнительной эффективности моделей
деятельности центров и условий их реализации
• Проведено общественно-профессиональное обсуждение
сравнительной эффективности различных моделей
деятельности центров профессиональной сертификации и
оценки профессиональной квалификации и экспертнометодических центров.
В ходе выполнения проекта были
проведены следующие работы (6):
• Разработаны методические рекомендации по
совершенствованию деятельности центров сертификации и
оценки профессиональных квалификаций, а также
рекомендации по оптимизации деятельности экспертнометодических центров, учитывающих региональные и
отраслевые особенности и мнения заинтересованных сторон,
выявленные в ходе выполнения работ I.6-I.8
• Разработаны основные принципы и концепции системы
критериев и процедур аккредитации центров сертификации и
оценки профессиональных квалификаций и их согласование с
Рособрнадзором.
• Осуществлена консультационная и методическая поддержка
партнеров проектов создания и развития центров сертификации
и оценки профессиональных квалификаций и экспертнометодических центров
Модели построения пилотных
отраслевых систем сертификации
• вовлеченность работодателей,
• разработанность профстандартов,
• наличие уже существующей сертификации в отрасли,
• стройность модели ЦОСК и ЭМЦ,
• разделение образовательных и профессиональных стандартов.
Модель отраслевого
монополиста (ОАК)
ОАК
Профстандарты
Сертификация
ВУЗы
Закрытая модель монополиста
на этапе становления сегмента
РОСНАНО
Профстандарты
Профстандарты
Сертификация
Профстандарты
ВУЗы
Модель с массовым и
слабоорганизованным работодателем
(сервис)
Профстандарты
ВУЗы
«Равновесная» модель двух
сильных игроков
(туризм)
• Сильное профессиональное сообщество
рестораторов и отельеров (ФРИО);
• Четко квалифицированные работодатели;
• Недостаточная вовлеченность
работодателей;
Модель конкурирующих корпоративных
стандартов (IT –отрасль)
ПС1
ПС2
ПС3
Сертификация 1
Сертификация 2
Сертификация 3
ВУЗы
ПС4
Сертификация 4
ПС5
Сертификация 5
Общие профстандарты
Модель «легитимации дипломов» (с
опорой на сложившиеся отраслевые
традиции) медицина
Госсектор
Частные компании
ВУЗы
Профстандарты
Сертификация
Формально-типовая модель
(HR, МИСИС, Машиностроение)
• Строго ориентированы на типовую
модель
• Низкая степень проработки
Модель сильной самоорганизующейся организации
с сильным отраслевым профессиональным лобби
(юристы)
ВУЗ 1
ВУЗ 2
ВУЗ 3
ВУЗ 4
Точки напряжения
в системе сертификации
• Общие (сквозные), независимо от
моделей:
Отсутствие разработанной системы профессиональных
стандартов
•
•
Слабая вовлеченность работодателей
•
Отсутствие легитимной процедуры признания стандартов
Смешение образовательных и профессиональных стандартов
(излишняя роль ВУЗов)
•
Аккредитация: основные
подходы
Индикаторы
универсальные
отраслевые
• Формальные индикаторы выполнения
Государственного контракта
• Индикаторы деятельности
• Оценка сертификации и ее качества
• Внешняя оценка услуг, предоставляемых центрами
Примеры разработанных индикаторов
Индикаторы: метод расчета, ожидаемые значения
Наименование
показателя/индикатора
Общее количество
профессий/специальностей, по
которым ЦОСК готов проводить
сертификацию
Методика расчета
Значения индикаторов
Количество
специальностей, по
которому ЦОСК готов
проводить сертификацию :
Общее количество
специальностей,
требующих сертификации
х 100
Желаемое – 100%
Допустимое-80% Недопустимое менее 80%
Количество новых
профессий/специальностей
сертификация которых освоена за
отчётный период
Нормативное значение
отсутствует
Количество новых
профессий/специальностей,
сертификация которых осваивается
в текущий момент времени
Нормативное значение
отсутствует
ЦОСК в области ИТ
Ожидаемое значение
индикатора к 2013 г.
1
1
Примеры разработанных индикаторов
Индикаторы: метод расчета, ожидаемые значения
Наименование
Методика расчета
показателя/индикатора
Количество
профессий/специальностей
сертификация которых за отчётный
период прекращена
Количество экспертов, которыми
ЦОСК располагает на текущий
момент времени
Количество
профессий/специальностей,
сертификация по которым
проводится на собственной
материальной базе
Общее количество соискателей за
период.(год)
Общее число соискателей,
Число соискателей,
получивших сертификат
получивших сертификат :
Общее число соискателей х
100
Значения индикаторов
Нормативное значение
отсутствует
Ожидаемое значение
индикатора к 2013 г.
0
Нормативное значение
отсутствует
5
Желательное – 100%
Допустимое 90%
1
Нормативное значение
50-100
отсутствует
Желаемое – 90% от обратившихся
Допустимое-75% Недопустимое менее 75%
ЦОСК в области ИТ
Примеры разработанных индикаторов
Индикаторы, оценивающие разработку СИМ
Наименование
показателя/индикатора
Методика расчета (если
индикатор расчетный)
Значения индикаторов
Предполагаемые
значения индикаторов к
концу 2013 года
3 комплекса
Количество разработанных СИМ
за отчетный период
Нормативное значение
отсутствует
Количество утвержденных СИМ
за отчетный период
Нормативное значение
отсутствует
3 комплекса
Количество обновленных СИМ
за отчетный период.
Нормативное значение
отсутствует
0
Количество аннулированных
СИМ за отчетный период (штук).
Нормативное значение
отсутствует
0
ЭМЦ в области юриспруденции
Примеры разработанных индикаторов
Индикаторы, оценивающие разработку стандартов в данной
области и их состояние
Наименование
показателя/индикатора
Количество разработанных
стандартов, находящихся на
стадии легитимизации на текущий
момент
Удельный вес стандартов,
находящихся в процессе
легитимации, к общему
потребному количеству стандартов
Количество стандартов,
прошедших легитимизацию за
отчётный период
Удельный вес стандартов,
разработанных с участием
профессиональных организаций
Число актуальных стандартов,
поддерживаемых ЭМЦ на текущий
момент
Число стандартов,
аннулированных за отчётный
период
Методика расчета (если
индикатор расчетный)
Значения индикаторов
Нормативное значение
отсутствует
Количество стандартов в
процессе легитимации :
Потребное количество
стандартов х 100
Нормативное значение
отсутствует
Нормативное значение
отсутствует
Количество стандартов,
разработанных с
соблюдением указанных
условий : Общее
количество разработанных
стандартов х 100
Предполагаемые значения
индикаторов к концу 2013
года
7
Желательное –
100 %
Допустимое –
не менее 90 %
Недопустимое –
менее 90 %
Нормативное значение
отсутствует
Нормативное значение
отсутствует
ЭМЦ в области юриспруденции
7
7
0
Примеры разработанных индикаторов
Индикаторы формального выполнения проекта
Индикатор
Источник
Значения
Соответствие отчетной документации Отчеты исполнителя
Техническому заданию
Экспертные заключения
«полностью соответствует»
(100% соответствия отчета ТЗ)
«частично соответствует» (не
менее 90 % соответствия
отчета ТЗ)
«не соответствует» (более 10
% расхождений с ТЗ)
Отставание от графика
Отчеты исполнителя
Желаемое - 0 дней (отчеты и
Акты о приемке работы
мероприятия сданы/проведены
в срок)
Допустимое – отставание до 2
дней
Критическое - 3 дней до
недели
Недопустимое - более недели
Индикаторы для проекта 08.01-027
Примеры разработанных индикаторов
Индикаторы формального выполнения проекта
Индикатор
Источник
Качество рекомендаций по
применению методики
использования национальной
и отраслевых рамок
квалификаций в процедурах
оценки качества
образовательных программ
профессионального
образования.
Качество рекомендаций по
использованию методики в
процедурах сертификации
квалификаций.
Оценка подготовленной
программы по повышению
квалификации (72 часа)
Оценка процедуры аттестации
по окончанию обучения
Значения
Отчет о выполнении работ
Отзывы пользователей методики
Оценка пользователей методики
(число положительных отзывов со
стороны учреждений
профессионального образования –
Отчет о выполнении работ
не менее 80 %)
Отзывы пользователей методики
Отчет о выполнении работ
Экспертные заключения
Отчет о выполнении работ
Экспертные заключения
Оценки независимых экспертов
(% оценок)
«хорошо» (не менее 60)
«приемлемо»,
«неудовлетворительно» (не
более 10)
Индикаторы для проекта 08.01-027
Визуализация как система различных
«мониторов», привязанных к календарной
сетке
Система визуализации
«Монитор событий»
Система визуализации
«Циклограмма проектов»
Значимые результаты I-го этапа проекта
Поставленные задачи на I-ом этапе выполнения
проекта достигнуты в полном объеме:
• В результате проведенного анализ опыта
сертификации и типологизированы отраслевые
модели систем сертификации
• Разработана система индикаторов для трех типов
объектов мониторинга
• Проведены мониторинговые сессии с исполнителями
проектов по созданию систем сертификации
• Разработана и запущена в эксплуатацию система
визуализации мониторинга