Оценка программ профилактики и укрепления здоровья Государственный научноисследовательский Центр профилактической медицины МЗ РФ, Москва Ведущий научный сотрудник, кандидат медицинских наук Т.В.Камардина 6 шагов принятия научнообоснованных решений 1. 2. 3. 4. 5. 6. 2 Кратко определить проблему и подходы к ее решению Установить, что известно из научной литературы Выразить проблему в количественном выражении Разработать возможные программы или политику для решения проблемы Разработать план действий для осуществления программы или политики Оценить программу или политику 6-й шаг - оценка программ или политики Как Вы оцениваете программу, по каким критериям? 3 Основной вопрос оценки Достигнуты ли задачи программы? Другими словами это означает «эффективна ли программа?». 4 Что такое оценка? «Оценка программ в области здравоохранения представляет собой системный метод приобретения знаний из опыта и использование полученных уроков с целью улучшения текущей деятельности и планирования за счет выбора альтернатив для дальнейшего ее осуществления». «Оценка программ здравоохранения. Руководящие 5 принципы». ВОЗ, Женева, 1981. Оценка программ включает: Периодический обзор Адекватность в свете реальных обстоятельств ее задач и методов Запланированные и незапланированные результаты. (определение программы ВОЗ/CINDI) 6 Схема оценки программы Исходная ситуация Ресурсы ФР Ресурсы Кадровые Материальные и т.д. 7 Стратегии и Промежуточные Конечные процессы – результаты результаты внедрение Политика Изменения в Законодательство структуре Образование службы,учасРабота с СМИ тие медиков, Образование отношение к профессионалов профилактике Оценка процессов ФР Заболеваемость Смертность Качество жизни Типы оценки* на основе принятия решений Диагностическая (diagnostic) оценка Формативная (formative) оценка Заключительная (summative) оценка *(Green, Lewis, 1986) 8 Уровни оценки* Оценка процессов (process evaluation) Оценка воздействия (impact evaluation) Оценка конечных результатов (outcome evaluation) 9 * Green, Kreuter, 1991 Требования к данным, которые используются для оценки программы Надежность, достоверность данных – степень, в которой результаты могут быть повторены. Валидность, обоснованность – степень, в которой метод измеряет то, что должен измерять. 2 вида – внутренняя и внешняя обоснованность 10 Примеры надежности данных 11 Смертность – установление причины смерти. Регистр смертности – определенные критерии установки причины. Факторы риска. Наличие стандартной анкеты. Примеры обоснованности данных 12 Заболеваемость стенокардией напряжения. Данные поликлиники. Распространенность стенокардии напряжения по данным опросника Роуза. Изучение исходной ситуации – диагностическая оценка Ревизия данных официальной статистики Ревизия имеющихся данных и сбор дополнительных эпидемиологических данных Оценка нужд и существующей практики Оценка ресурсов – технических, кадровых, функционально-структурных 13 Оценка нужд профилактики в обществе Инновационный подход Один из принципов социального маркетинга Качественная оценка 14 Оценка процессов развития программы (формативная оценка) Отвечает на вопросы «Что делается? Для кого? И Как?» Позволяет скорректировать действия Проводится через короткие промежутки времени 15 Оценка влияния – оценка промежуточных результатов Отвечает на вопросы «Какие результаты получены при внедрении программы? Какие наиболее быстрые результаты получены и как их можно распространить?» Происходит изменение поведения Показатели для оценки – изменения в знаниях, отношении, привычках, умении. 16 Пример оценки процессов и влияния Стратегия 17 образования медицинских работников Процесс – непрерывной медицинское образование Показатели для оценки Результаты/эффект/влияние Источники получения информации Оценка конечных результатов программы 18 Каждый проект/программа имеет конкретные задачи, цели В какой степени достигнуты эти задачи позволяет сказать конечная оценка Что оценивается – смертность, заболеваемость, факторы риска Пример: проект Северная Карелия – через 20 лет смертность снизилась более, чем на 50%. Примеры оценки процессов и конечных результатов Проект ТАСИС в Вологде, 1998-2000 гг. 19 Оценка процессов и конечных результатов – преимущества и недостатки Процессы Конечные результаты Чаще качественная Чаще количественная Через короткие промежутки Через длительный времени период времени В течение всей программы В конце программы позволяет заглянуть внутрь Невозможно применить программы обратную связь и Дает возможность применить изменить программу и обратную связь и изменить вкладываемые в нее ход программы ресурсы Позволяет прогнозировать Более точная оценка конечный результат Позволяет судить о 20 Позволяет экономить ресурсы достижении задач Экономическая эффективность программы затраты Прямые – медицинские, немедицинские затраты, неформальные затраты, затраты времени пациента Непрямые – потери вследствие заболевания и смерти 21 Организация оценки программы Концептуальная модель Исходная ситуация Стратегии для достижения задач Конечные и промежуточные результаты Показатели оценки Протокол оценки Инструменты для мониторирования показателей. 22 Кто должен оценивать программу Население - принцип социального маркетинга Лица, практически осуществляющие программу - врачи, медицинские сестры, учителя Лица, организующие программу Ресурсодатели, спонсоры 23