Автоматизированная система управления качеством вуза Министерство образования Российской Федерации

Министерство образования Российской Федерации
Ивановский государственный энергетический университет
Автоматизированная система управления качеством вуза
Проект выполнен по гранту
Национального фонда подготовки кадров
Проблемы и дефекты системы высшего образования:
-
смешиваются понятия «качество» и «управление качеством»;
нет формул оценки эффективности вуза;
слабо видны стратегические мотивы (миссия, видение, и т.п.);
дефекты системы измерения качества (субъективизм, приписки и др.);
не измеряется уровень компетентности учащихся;
не отражается степень удовлетворения запросов клиентов высшей
школы;
не принято измерять качество процессов.
Многомерное качество образования
-
уровень удовлетворения запросов многих и разных групп
потребителей;
управление комплексом элементов качества (вход, процесс, выход,
ресурсы);
многообразие методов измерения качества и антикачества;
управление качеством всех процессов в вузе;
вовлечение всех сотрудников в управление качеством.
Принципы управления вузом в среде многомерного качества
(по мотивам принципов менеджмента качества в стандарте ISO)
Ректор
возглавляет
работы по
Автоматизация. качеству
CALSтехнологии
Все
сотрудники
участвуют в
управлении
процессами
Тотальное
управление
Решения
Вуз,
качеством
принимаются
ориентированный
взаимосвязанна основе
ных
на клиента
фактов
процессов
Непрерывное
Качество
улучшение
образования –
качества
понятие
процессов и
многомерное
Бездефектные результатов
процессы
обучения
Семь систем стратегического управления качеством вуза
Концепция развертывания стратегических планов вуза
Компьютерный
университет
Предпринимательск
ий университет,
сочетающий
инновационную
активность с
наукоемкими
Университет
физической
культуры и
спорта
Виртуальный
университет с
межвузовским
мобильным
коллективом.
И ГЭУ
технологиями.
в 2009 году
Открытый
университет с
развитой системой
дистанционного
обучения
Ресурсный центр
информационных и
вычислительных
технологий
Консорциум учебноисследовательских
организаций и
промышленных
корпораций
Будущий облик университета
Университет
качества,
исповедующий
политику
бездефектных
процессов.
Основные контуры управления качеством
Ученый совет
Внешняя
Объявление миссии вуза
среда
Цикл реактивного управления
РЕКТОР
Проректор
A
Формирование
будущего
облика вуза
Стратегическое
планирование
«Развертывание» планов
по системам
качества
(по подраздел.)
планирование
среда
C
S
D
C
A
Цикл работы по стандарту
1 год
Корректировка
в новом цикле
планирования
Внешняя
D
Ежегодное
Корректировка
в новом цикле
планирования
Корректировка
облика вуза
P
3 год
Контроль
движения
к новому
облику вуза
7 год
Измерение
результатов и
проверка
выполнения
планов
Схема развертывания стратегических и тактических планов развития
университета
Хошин
ректора
Увеличить
на 30% объем
доходов, направляемых на развитие ресурсов
вуза, путем
применения
высокоэффективных технологий в управлении, обучении,
научных исследованиях и
производстве
Выделяемые
ресурсы
Система
измерения
результатов
Проректор по учебной работе
Увеличить на 30% объем
платных образовательных
услуг путем развития
компьютерных систем
Учебное управление
Увеличить на 30% объем
краткосрочных
образовательных услуг
путем ...
Отдел
№1
Увеличить на 50%
продажу учебной
продукции
Отдел
№2
Снизить затраты на
выпуск продукции
на 10%
Деканы
Увеличить объем контрактов на подготовку специалистов путем развития
дистанционного обучения
Проректор по
хозяйственной работе
Снизить на 20% затраты на
коммунальные услуги
Главный инженер
Снизить расход природного газа на 15% путем
перехода к закрытой
системе теплоснабжения
Главный энергетик
Уменьшить на 20%
расход электроэнергии
путем замены
энергоемких приборов
Снизить на 10%
Отдел
потери тепла через
№3
оконные конструкции
Отдел
№4
Снизить на 10%
расходы
электроэнергии
путем...
Проректор по научной работе
Увеличить объемы продаж
научных проектов и наукоемкой продукции на 20% путем
привлечения инвесторов из
промышленной сферы
Директор
научного сектора
Увеличить объем хозяйственных договоров с
предприятиями на 30%
путем тиражирования
наукоемкой продукции
Увеличить на 50%
Кафеобъем работ по геоиндра
формационным
№1
системам
Увеличить на 30%
Кафеобъем внедрений
дра
микропроцессорных
№2
систем управления
Кафедра
№3
Провести опытное
тиражирование
системы TQM
в высшей школе
Структура ИГЭУ, ориентированная на выполнение миссии вуза
Ученый совет
Попечительский совет
Ректор
Учебно-научный
центр менеджмента
качества образования
Советы качества
при проректорах
Комитет менеджмента качества
образования
Проректоры
Институты
Факультеты
Миссия
ВУЗа
Кафедры
Центры
Временные
творческие коллективы
Подразделения
проректора
по учебной
работе
Подразделения Подразделения
проректора
проректора
по научной
по хозяйств.
работе
работе
Подразделения
ректора
Подразделения
проректора
по административной
работе
Подразделения
проректора
по инновационной
политике
Подразделения
проректора
по информатизации
8 категорий измерения менеджмента качества
Измерение
результатов
Управление
вузом
Формирование
ресурсов
Бездефектное
обучение и
ориентация на
потребителей
Стратегическое
планирование
8 категорий
измерения
качества
Управление
персоналом
Взаимодействие с
потребителями и
рынками
образовательных
услуг
Формирование
данных и анализ
информации
Анкеты для экспресс-оценки
Измерение
результатов
Управление
вузом
Вопрос V1.1. Насколько эффективно ректор осуществляет управление вузом в
соответствии основными
задачами и стратегическими целями организации?
Формирование
Стратегическое
планирование
ресурсов
Вопрос V1.3. Насколько эффективно ректор занимается поиском возможностей для
категорий мнения всех заинтересованных лиц?
будущего развития вуза, принимая во8внимание
измерения
качества
Варианты ответов:
Бездефектное
• (0) вопрос не понятен,
обучение и
ориентация на
• (1) не знаю,
потребителей
• (2) плохо,
• (3) удовлетворительно,
• (4) хорошо,
Управление
• (5) отлично.
персоналом
Взаимодействие с
потребителями и
рынками
образовательных
услуг
Формирование
данных и анализ
информации
Схема выявления показателей эффективности процессов управления
качеством
Анкета W1
Эталон W1
Анкета W2
Эталон W2
Анкета W3
Эталон W3
Анкета W4
Эталон W4
КОЛЛЕКТИВ
ВУЗА
Анкета W5
Эталон W5
Анкета W6
Эталон W6
Анкета W7
Эталон W7
Анкета W8
Эталон W8
Компьютерный фильтр
Qэ(r)
Qэ(p)
Qэ(d)
Qэ(z)
Qэ(n)
Qэ(c)
Qэ(вуз)
ПРОГРАММНЫЙ КОМПЛЕКС ВИЗУАЛИЗАЦИИ РЕЗУЛЬТАТОВ ОЦЕНКИ КАЧЕСТВА
ГРАФИКИ
ПАРЕТО
ГИСТОГРАММЫ
ИШИКАВА
Схема вычисления эффективности процессов управления качеством
образования на уровне ректора
W1.1 (d1)
1/15
1/8
Qэ (r)
Dэ(r)
D1 э(r)
W1 (d1)
1/L
KD(r)
W1.2 (d1)
1/15
......
W1.15 (d1)
1/15
W2.1 (d1)
D2э(r)
W2 (d1)
1/17
1/8
Zэ (r)
1/L
Схема «r1»
W2.2 (d1)
1/17
......
Nэ(r)
W2.17 (d1)
Схема «r2»
1/17
......
W8.1 (d1)
...
DLэ(r)
W8 (d1)
1/9
W8.2 (d1)
1/9
......
W8.9 (d1)
1/9
...
1/8
Cэ (r)
1/L
Схема «r3»
Графическое представление результатов опроса в стартовой точке
«Экспресс-оценка и экспресс-самооценка уровня готовности вуза к работе в
системе многомерного менеджмента качества»
Интегральная оценка заведующего кафедрой
«Программное обеспечение компьютерных систем»
Qz1=3.6
Графическое представление результатов опроса в стартовой точке
«Экспресс-оценка и экспресс-самооценка уровня готовности вуза к работе в
системе многомерного менеджмента качества»
Схема контроля эффективности процессов управления качеством
образования в течение пятилетнего цикла
1
Экспресс-оценка. Переподготовка
персонала и контроль результатов
2
3
4
Оценка эффективности процессов
управления
Выявление слабых мест.
Бенчмаркинг и устранение дефектов
Выявление разногласий в оценках и
самооценках. Устранение дефектов
i=8?
нет
да
9
10
Оценка эффективности процессов
управления
Подготовка материалов для
аттестационной комиссии
Информационный модуль системы управления качеством образования
От компьютера к компьютеру
Выходной
тест
Промежуточный контроль
Психологический тест
Входной
тест
Приемный
экзамен
АК 5
Заключительный экзамен
АК 6
АК 4
АК 3
Профессиональ
-ные навыки
АК 7
Государственный экзамен
АК 8
АК 2
АК 1
Дипломный
проект
АК 9
РЕГИСТРАЦИЯ
Олимпиада
(дистанцион.)
АНАЛИЗ
ЦЕНТРАЛЬНАЯ БАЗА ДАННЫХ
АК 10
АК 18
Информационный портал
АК 17
Процессы
АК 11
АК 12
АК 16
Абитуриент
АК 15
Студент
АК 13
АК 14
Дистанционное
обучение
Электронная
библиотека
Ресурсы
Выпускник
Персонал
КОНСУЛЬТАЦИИ И КОРРЕКТИРУЮЩИЕ ЗАНЯТИЯ
Векторная диаграмма качества образовательной программы “Н”
"Вход"
Эталон
Реальное
качество
Процессы
Ресурсы
Стандарт
"Выход"
Интеграция оценок качества абитуриента
Качество
абитуриента
Уровни
Уровни
предпочтения
Уровни
предпочтения
абитуриента
предпочтения
абитуриента
абитуриента
Оценка знаний
Оценка знаний
абитуриента
Оценка знаний
абитуриента
абитуриента
Качество
среднего
абитуриента
вуза
Индикаторы
Индикаторы
качества
Индикаторы
качества
абитуриента
качества
абитуриента
абитуриента
Оценка
Оценка
психологического
Оценка
психологического
теста
психологического
теста
теста
Качество
среднего
абитуриента
специальности
Рейтинг
Рейтинг
абитуриента
Рейтинг
абитуриента
абитуриента
Индикаторы качества студентов
Оценка качества процесса учения
Промежуточная оценка
Оценка творческого экзамена
Компьютерная система
оценки результатов учения
и обучения студентов
S кп
S пк
S экз
От 0 до 5
От 0 до 5
От 0 до 5
Система
независимого
тестирования
Оценки знаний студента “Y” по учебному курсу “Х”
Оценка качества процесса учения
От 0 до 5
Sкп
Оценка независимого входного теста
Sвх
От 0 до 5
Промежуточная оценка
Sпк
От 0 до 5
Sвых
Оценка независимого выходного теста
От 0 до 5
Оценка творческого экзамена
От 0 до 5
Sэкз
Sинт
Интегральная оценка
От 0 до 500
Стандартная оценка
S
2, 3, 4 или 5
Рейтинг
R
От 200 до 600
Формула интегральной оценки знаний
Sинт =10 Sкп + 10 Sвх + 20 Sпк + 30 Sвых + 30 Sэкз
Sинт – интегральная оценка результатов обучения,
Sкп – оценка процесса учения,
Sвх - оценка по результатам независимого входного
тестирования остаточных знаний,
Sпк – оценка промежуточного контроля результатов обучения
в середине семестра,
Sэкз - оценка заключительного экзамена, проводимого в
устной или письменной форме,
Sвых – оценка по результатам независимого выходного
тестирования знаний. Все указанные промежуточные оценки
выставляются в диапазоне от 0 до 5.
Рейтинг студента
m
Rнов = Rстар + Квес S(Si – mSож),
i=1
Rнов - новое (вычисляемое) значение рейтинга,
Rстар - предыдущее (старое) значение рейтинга,
Квес - весовой коэффициент (от 3 до 10)
m - количество испытаний в семестре,
Si - оценка, полученная на очередном i-ом испытании,
Sож - ожидаемая оценка, вычисляемая компьютерной системой
по формуле прогноза
Sож = f(Rстар).
Уровни компетентности студента
Системная
компетентность
Навыки
межличностного
общения
Технологическая
компетентность
Качества личности
Компетентность в
распределении
ресурсов
Базовые навыки
Мыслительные
навыки
Компетентность в
работе с
информацией
Алгоритм измерения уровней компетентности
Процесс обучения
Учебный курс 1
Учебный курс 2
Учебный курс n
Индикаторы качества выпускников
Послевузовская
оценка
выпускника
Оценка знаний
выпускника
Оценка
выпускника по
анкетным данным
Оценка
психологического
теста выпускника
Рейтинг
выпускника
Индикаторы
качества
выпускников
Качество
выпускника по
оценке
преподавателей
Самооценка
качества
трудоустройства
Качество
выпускника по
оценке
работодателя
Рейтинг выпускника
Послевузовская
оценка
выпускника
Рейтинг выпускника
Оценка
выпускника по
анкетным
данным
Итоговый
рейтинг
студента
Оценка знаний
выпускника
Оценка
Рейтинг
от 200 до 700 выпускника
Индикаторы
Место среди выпускников вуза качества
от 1 до 1000
выпускников
Оценка
Самооценка
психологического
качества
Местотеста
среди
выпускников
от
1
до
100
выпускника
трудоустройства
специальности
Качество
выпускника по
оценке
преподавателей
Качество
выпускника по
оценке
работодателя
Пять видов ресурсов учебного курса
Технические
ресурсы
Кадровые
ресурсы
Методические
ресурсы
Ресурсы
учебного
курса
Программные
ресурсы
Информационные
ресурсы
Схема измерения показателей качества ресурсов вуза
Показатели качества ресурсов (ПКР) учебного курса «X1»
ПКР
образовательной
программы «А1»
ПКР
образовательной
программы «С1»
ПКР
образовательной
программы «В1»
Показатели качества ресурсов факультета «Y1»
Интегральные показатели
качества ресурсов
образовательных программ вуза
Показатели качества
общевузовских ресурсов
Показатели качества ресурсов вуза
Бенчмаркинг и измерение качества ресурсов
Измеряемый
образец
ВНУТРЕННИЙ
БЕНЧМАРКИНГ
ВНЕШНИЙ
БЕНЧМАРКИНГ
Лучший
образец
внутри вуза
Лучший
образец
вне вуза
Уровень
приближения
к лучшему образцу
Этапы оценки качества ресурсов с использованием идей бенчмаркинга
Фиксируется наличие (1) или отсутствие (0)
измеряемого ресурса
1
Фиксируется наличие (1) или отсутствие (0)
информации о параметрах качества эталонного
образца измеряемого ресурса
1
0
0
Оценка
Осуществляется сравнение
конкретного ресурса с
эталонным образцом и
выставляется одна из оценок:
1
очень плохой
2
плохой
3 удовлетворительный
4
хороший
5
лучше эталона
Общая схема профилактики дефектов
Бенчмаркинг поиск эталонов и
формирование
задания на
проектирование
новых процессов
(ресурсов)
Самообследование
и оценка качества
ресурсов
(процессов)
подразделения вуза
Планирование
Сравнение
улучшений
Исполнение
планов
Анализ
выполнения
планов и
корректировка
целей и задач
Измерение
результатов
Ресурсы для пяти групп процессов
Методическое обеспечение
процессов общения
преподавателя и студентов
Программное обеспечение
процессов
профессионального
развития ППС
Кадровое обеспечение
процессов развития
образованности личности
Информационное
обеспечение процессов
совершенствования
содержания образования
Техническое обеспечение
процессов измерения
результатов учения
и обучения
Фрагмент анкеты самооценки качества ресурсов учебного курса
Учебный курс
X1
Образовательная
программа
Y1
Год
2003
Оценки и ответы
0
1
2
3
4
Индикаторы качества учебного курса
В каком вузе, на Ваш взгляд, сосредоточены
лучшие методические пособия (МП) по проблеме
«Взаимодействие с помощью ситуационных
моделей»?
Как оцениваете качество Ваших методических
пособий по проблеме «Взаимодействие с
помощью ситуационных моделей»?
4
В каком вузе, на Ваш взгляд, сосредоточены
лучшие МП по проблеме «Взаимодействие с
помощью имитационных моделей»?
Как оцениваете качество Ваших МП по проблеме
«Взаимодействие с помощью имитационных
моделей»?
4
5
Индикаторы качества ППС
Самооценка
качества
преподавателя в
пяти сферах
деятельности
Качество по
результатам
ежегодного
отчета
Оценка уровня
участия в
учебной жизни
университета
Оценка коллегами
профессиональных
качеств
Индикаторы
качества ППС
Оценка
сопутствующей
профессиональной
деятельности
Оценка
студентами
учебного курса
Оценка
исследовательской
работы и внешнего
признания
Оценка
общественной
деятельности
Самооценка преподавателем качества учебного процесса
Самооценка
Качество по
качества
результатам
преподавателя в
ежегодного
Самооценка преподавателем
качества учебного
пяти сферах
отчета
деятельности
процесса
уровня процессов общения
КачествоОценка
обеспечения
участия в
преподавателя
и студентов
Оценка
0
1
2
3
Оценка коллегами
профессиональных
качеств
учебной жизни
Качествоуниверситета
обеспечения процессов развития
Индикаторы
качества
ППС
Качество обеспечения процессов
измерения
образованности личности
результатов учения
Оценка и обучения
Оценка
исследовательской
сопутствующей
Качество обеспечения процессов совершенствованияработы и внешнего
профессиональной
содержания
образования
признания
деятельности
Качество обеспечения процессов профессионального
развития ППС
Оценка
студентами
учебного курса
Оценка
общественной
деятельности
4
5
Оценка студентами учебного курса
пригодность
учебного курса
для дальнейшего
использования
качество
презентации
учебного
материала
цели и задачи
учебного курса
Оценка
студентами
учебного
курса
организация учебного курса
качество
подготовки
учебного курса
Оценка студентами организации учебного курса
Организация курса
Оценка
0
Содержание представленного материала
соответствовало общей цели курса?
Порядок представления материала был логичным и
полезным?
Акценты на отдельные аспекты изучаемого материала
были своевременными и четкими?
Можно дать общую оценку: преподаватель хорошо
организован?
Можно дать общую оценку: учебный курс хорошо
организован?
1
2
3
4
5
Формулы эффективности университета:
W(вуз) = Q(вуз)*K(деф)
Q(вуз) = [Qэ(упр)+Q(учебн)+Q(фин)+Q(наука)+Q(хоз)+Q(соц)+Q(комп)]/7
K (деф) =[P (вуз) – (ЦД + ЦП) ]/P (вуз)
Векторная диаграмма качества образовательной программы “Н”
"Вход"
Эталон
Реальное
качество
Процессы
Ресурсы
Стандарт
"Выход"
Векторная диаграмма качества методического обеспечения
образовательной программы Н.
Средства обеспечения процессов общения преподавателя и студента
Видеоматериалы
Экспресстестирование
Ситуационные
модели
3
Мультимедиа
4
2
4
4
Раздаточный
материал
Учебный курс
Образовательная
программа
3
ВУЗ
Научная работа
студентов
4
5
Имитационные
модели
Интерактивные
эксперименты
Стандартная схема организации бездефектного обучения

Предыдущий
процесс
ИК
?
-
+
цикл
SDCA1
цикл РDCA
Улучшение
качества
процесса
(ресурсов)
+
?
Подразделение
(команда) более
высокого уровня
--
-Основной
процесс
(SDCA)
ИК
? +
-
цикл
SDCA2
Последующий
процесс
ИК

+
- запаздывание
ИК - измеритель качества
цикл
SDCA3
--
?
-
Учебно-научный
центр менеджмента
качества
образования
Частный вариант схемы организации бездефектного обучения
Бенчмаркинг
Реактивное
совершенствование
процессов и ресурсов
Реактивное
совершенствование
процессов и ресурсов
Входные тесты
Преподавание
математики
Преподавание
компьютерных
наук
Ир
S
Ир
Ир - измерение качества результатов
-
+
Преподавание
физики
Совершенствование по
математике
+
Ир
Ипр
-
+
Ипр- измерение качества процессов
Совершенствование по
комп. наукам
+
Ир
-
-
Коррекция
процесса
+
Ир
-
Применение схемы «поставщик-потребитель» в управлении учебным
процессом
Математика (408 часов)
Преподаватель Королева
М.П
Тест №1
входной
Физика (306 часов)
Преподаватель Подтяжкин Е.Я.
Тест №1
выходной
Тест №2
входной
Информатика (187 часов)
Преподаватель Евсин С.И
Тест №2
выходной
…
Тест №17
входной
Информационное и управляющие
микропроцессорные системы (136 часов)
Преподаватель Анисимов А.А.
Тест №17
выходной
Тест №18
входной
Электрические машины (86 часов)
Преподаватель Шишкин В.П.
Тест №18
выходной
Пример теста
Студент должен ввести
формулу вида
I2 
U ab  I1 R1  E  I1 R2
R2
Общая схема профилактики дефектов
Бенчмаркинг поиск эталонов и
формирование
задания на
проектирование
новых процессов
(ресурсов)
Самообследование
и оценка качества
ресурсов
(процессов)
подразделения вуза
Планирование
Сравнение
улучшений
Исполнение
планов
Анализ
выполнения
планов и
корректировка
целей и задач
Измерение
результатов
Ориентация вуза на удовлетворение потребностей клиентов и
непрерывное совершенствование качества образования
D C
P A
D C
P A
D C
P A
D C
P A
Лавинообразная модель
D C
P A
Ошибочная модель
От компьютера к компьютеру
Выходной
тест
Промежуточный контроль
Психологический тест
Входной
тест
Приемный
экзамен
АК 5
Заключительный экзамен
АК 6
АК 4
АК 3
Профессиональ
-ные навыки
АК 7
Государственный экзамен
АК 8
АК 2
АК 1
Дипломный
проект
АК 9
РЕГИСТРАЦИЯ
Олимпиада
(дистанцион.)
АНАЛИЗ
ЦЕНТРАЛЬНАЯ БАЗА ДАННЫХ
АК 10
АК 18
Информационный портал
АК 17
Процессы
АК 11
АК 12
АК 16
Абитуриент
АК 15
Студент
АК 13
АК 14
Дистанционное
обучение
Электронная
библиотека
Ресурсы
Выпускник
Персонал
КОНСУЛЬТАЦИИ И КОРРЕКТИРУЮЩИЕ ЗАНЯТИЯ
Семь систем стратегического управления качеством вуза