Українська асоціація оцінювання - Международная сеть "Оценка
реклама
Примеры использования оценки в государственном секторе XIII ежегодная конференция Международной Сети «Оценка Программ» (IPEN) Ирина Кравчук, Глава Правления УАО (соавторы, предоставившие примеры: И.Кузин, Р.Рудницкая, О.Носова, В.Куприй) Кишинев, Молдова 26 сентября 2013 Структура презентации Определение «evaluation capacity» - «способность к оценке» Условия и возможности для оценки в госсекторе + примеры в Украине Международный опыт – США, Польша Что дальше ? A Systemic approach to National Evaluation Capacity Development (Marco Segone) Institutional Level (policies, procedures, frameworks) (policies, legislation, power relations, social norms) Supply Demand Enabling Environment Individual Level (skills, knowledge, experience) • Tailored to the specific context of each country • Country leadership and ownership Cпособность к оценке “cпрос на оценку“/evaluation demand - организационно-правовой механизм оценки государственной политики: - Способность и обязательства правительства инициировать оценку и использовать результаты оценки, включающая правовые основы (правовой механизм), организационную культуру, политический контекст, то есть; - институты, правила и процедуры системы мониторинга и оценки (институциональный механизм); 2) предложение оценки/evaluation supply – ресурсный механизм - кадровое, информационное и финансовое обеспечение оценки, достаточные человеческие ресурсы с необходимыми навыками, технический потенциал информационные технологии и системы коммуникации 3) институицонализация/institutionalization – практическая разработка и внедрение системы мониторинга и оценки, которая предоставляет важную информацию для ключевых заинтересованных сторон 1) Украина • анализ регуляторного влияния (ОРВ) (Закон 2002 г.) • оценка экономической и социальной эффективности выполнения государственных целевых программ (Закон 2004 г.) • оценка эффективности бюджетных программ (Бюджетный кодекс 2010 г.) • примеры оценки в отдельных секторах Оценка регуляторного влияния • предварительная оценка применяется к проектам регуляторных актов на стадии разработки (2018 проектов в 2012 г.) • отслеживание результативности регуляторного акта в процессе его внедрения (808 актов в 2012 г.) • помогает определить неефективные акты и те, которые ухудшают условия хозяйственной деятельности (Государственная служба регуляторной политики может отказать в согласовании – 21 %) Оценка регуляторного влияния НО… • почти половина отчетов (48 %) не имеют оценки определения степени достижения целей установленных при принятии регуляторных актов (2012) • только 5 % отчетов имели информацию о сравнительном анализе фактических значений показателей результатов с прогнозными значениями показателей, определенных в АРВ (2012) • формальная юридическая процедура, которая мало используется при принятии решений Оценка государственных целевых программ (ГЦП) • ГЦП - это комплекс взаимосвязанных задач и мероприятий, направленных на решение важнейших проблем развития государства, отдельных отраслей экономики или административно территориальных единиц, осуществляются с использованием средств Государственного бюджета Украины и согласованы по сроками выполнения, составом исполнителей, ресурсным обеспечением • заключительный отчет о исполнении должен содержать основные данные о программе, ее цели и результаты достижения цели , информацию о фактических объемах и источниках финансирования программы, выполнение заданий и мероприятий, оценку эффективности выполнения программы. • на основе анализа количественных и качественных показателей, достигнутые в результате выполнения программы, делается оценка еффективности ее выполнения • “Методические рекомендации по проведению оценки еффективности ГЦП” (Минекономразвития) Оценка государственных целевых программ (ГЦП) • часть государственных целевых программ не финансируются, так как главные распорядители средств не включают их в бюджетные программи, не имеют кодов ГЦП • это переходный механизм во внедрении программноцелевого планирования, который уже выполнил свою задачу • с каждым годом количество государственных целевых программ сокращается Оценка ефективности бюджетных программ Программно-целевой метод бюджетирования • паспорт бюджетной программы включает результативные показатели бюджетных программ (качественные и количественные показатели, используемые для оценки эффективности бюджетной программы, разрабатываемые органами исполнительной власти в соответствии с нормативно-правового акта Министерства финансов) • ответственные исполнители бюджетных программ, паспорта бюджетных программ Оценка ефективности бюджетных программ Оценка эффективности бюджетных программ на всех стадиях бюджетного процесса: • мониторинг, анализ и контроль за целевым и эффективным использованием бюджетных средств • результаты оценки эффективности бюджетных программ и заключения контролирующих органов является основой для принятия решения о внесении изменений в бюджетные назначения или остановки финансирования программ • Методические рекоммендации оценки еффективности бюджетных программ (Министерство финансов) Примеры в секторах • • • • Описание (предмет оценки, цель, методология, главные заключения и рекоммендации) Каким образом главные заключения и рекоммендации были использованы в процессе принятия решений, планировании, распределении финансирования? Какие факторы помогали использованию оценки? Какие факторы мешали использованию результатов оценки? Примеры в секторах • Внешняя независимая Оценка выполнения Общегосударственной программы обеспечения профилактики ВИЧ - инфекции, лечения, ухода и поддержки ВИЧ - инфицированных и больных СПИДом на 2009-2013 годы в Украине • Оценка Региональной Программы развития малого предпринимательства во Львовской области • Оценка эффективности государственной антикорупционной стратегии • Общественная экспертиза деятельности госорганов Общегосударственная программа обеспечения профилактики ВИЧ Задачи оценки: проанализировать достижения, сильные стороны, недостатки и слабые стороны, определить ключевые проблемы, разработать стратегические и практические рекомендации Инициаторы: Национальный совет протидействия туберкулезу, ВИЧинфекции/СПИД, Госслужба соцзаболеваний вместе с ЮНЕЙДС Рабочая группа: представители госорганов, общественных и международных организаций в сфере ВИЧ/СПИД, 15 независимых национальных и международных экспертов Финансовая и нематериальная поддержка - ВООЗ, Глобальный фонд, ЮНИСЕФ, ЮНЕЙДС, ПРООН, USAID,ЮНОДОК) Длительность: июль-декабрь 2012 г. Общегосударственная программа обеспечения профилактики ВИЧ Использование: • Концепция Общегосударственной целевой социальной программы противодействия ВИЧ-инфекции/СПИДа на 2014-2018 годы • Проект Общегосударственной целевой социальной программы противодействия ВИЧ-инфекции/СПИДа на 2014-2018 годы (на стадии согласования с Минэкономразвития) Факторы (+): • Своевременность ее завершения ( перед началом процесса разработки новой программы) • Широкое обсуждение результатов и выводов оценки Факторы (-): • Большинство первичных текстов было подготовлено на английском и были определенные трудности с адаптацией украиноязычного варианта Региональная Программа развития малого предпринимательства во Львовской области Задачи оценки: провести оценку эффективности и результативности реализации программы с привлечением заинтересованных сторон и разработать рекомендации по ее совершенствованию, разработать методику мониторинга и оценки региональных программ развития малого предпринимательства Использование: для совершенствования следующего документа сроком на 2 года, а также при разработке Стратегии развития малого предпринимательства в регионе, для разработки Методики мониторинга и оценки с привлечением заинтересованных сторон Региональная Программа развития малого предпринимательства во Львовской области Факторы (+): • поддержка руководства Львовской государственной администрации, а также руководства департамента экономики, который был основным заказчиком оценки, • активность заинтересованных сторон • активное сотрудничество Львовской государственной администрации и областного совета Факторы (-): • смена руководства - за год изменилось 3 руководителя департамента экономики и руководитель который заказывал оценку вернулся к исполнению своих обязанностей • недостаток доверия со стороны предпринимателей к органам власти • недофинансирование программы, составляет 40 % от плановой потребности Оценка эффективности антикорупционной стратегии • Национальная антикоррупционной стратегии на 2011-2015 имеет раздел X «Мониторинг и оценка» - условием успешной реализации Национальной антикоррупционной стратегии является разработка и внедрение системы мониторинга и оценки • мониторинг и оценку реализации стратегии осуществляет Национальный антикоррупционный комитет • к мониторингу в целях соблюдения объективности и беспристрастности привлекаться неправительственные организации и независимые институты • индикаторы не SMART, нет теории изменений, почти нет финансирования • работает общественный мониторинг Общественная експертиза • Постановление Кабинета Министров Украины от 5 ноября 2008 № 976 "Об утверждении Порядка содействия проведению общественной экспертизы деятельности органов исполнительной власти» - проведение институтами гражданского общества оценки деятельности органов исполнительной власти, эффективности принятия и выполнения такими органами решений, подготовку предложений по решению общественно значимых проблем для их учета органами исполнительной власти в своей работе Общественная експертиза • Запрос от общественной организации о проведении экспертизы (предмет, цель, перечень документов) • орган исполнительной власти содействует экспертизе: издает распоряжение, создает рабочую группу, предоставляет документы, рассматривает предложения на коллегии, разрабатывает меры, размещает на своем сайте и сайте «Гражданское общество и власть» http://civic.kmu.gov.ua • Реестр общественных экспертиз - около 26 за 2010-1013 гг. Украина: выводы Спрос (demand) • неправильное понимание терминов «оценка», ассоциация с функциями аудита и контроля • законодательство по МиО существует, но выполняется формально • отсутствие политической воли • требование доноров • в основном проводят внутреннюю оценку. Не заказывают внешнее оценивание гос. программ по собственной инициативы Украина: выводы Предложение: • нехватка местных кадров и экспертизы. Международные эксперты оцениваются выше национальные • нехватка ресурсов (финансовых, технических, информационных) • бюджеты по МиО отсутствуют • отсутствие стандартов качества Украина: выводы Институционализация • формальное проведение оценки • формализованные процедуры отслеживания выполнения рекомендаций оценки отсутствуют • конечные результаты оценки государственных программ недоступны населению • отсутствуют подразделения и структуры, ответственные за инициоравание оценки Польша: документы • Руководящие принципы по оценке операционных программ на 2007-2013 гг (основные принципы системы и обязанности учреждений); • План по оценке Национальной стратегической рамочной программы (основные направления мероприятий по оценке) • Национальный план развития и система оценки Национальной стратегической рамочной программы (организация процесса оценки) Польша: институции • Национальное подразделение по вопросам оценки - в Министерстве регионального развития, который является основным субъектом в польской системе оценивания и отвечает за координацию других подразделений по вопросам оценки • Подразделения по оценке в министерствах - которые отвечают за организацию процесса оценки операционных программ • Надзорные группы - на уровне директоров министерств обеспечивают согласованность и определяют стратегические направления процесса оценки, принимают решение о внедрении результатов оценки • Мониторинговые комитеты - созданы для каждой операционной программы для того, чтобы вести мониторинг реализации программы США: правовой механизм • Правительственный акт о деятельности и результатах (1993 г.): 5етние стратегические планы, определение целей и ежегодных планов деятельности, индикаторов деятельности, измерения прогресса, мониторинга и оценки выполнения программ и их влияния, подавать годовые отчеты о деятельности и достижения целей. • Инструмент определения рейтинга программ (эффективная, средняя эффективность, удовлетворительно, неэффективная, результатов нет)(2004) • Акт о модернизации правительственного акта о деятельности и результаты (2010 г) - акцент с рейтингования программ на требование устанавливать небольшое количество высокоприоритетных целей с индикаторами и количественными значениями индикаторов (targets), и возможностью привлечь общественность. демонстрировать прогресс в достижении целей, объяснять тенденции. США: институции • Офис управления и бюджета обеспечивает соответствие планов и отчетов агентств политике и бюджету Президента • Общий офис аудита (GAO) - развивает и распространяет методы оценки для федерального правительства • Межведомственный совет по совершенствованию деятельности осуществляет координацию управления деятельностью, с ориентацией на результаты, включая выработку и совершенствование стратегических планов и ежегодных отчетов о деятельности. An Evaluation Roadmap for a More Effective Government – 2010 г.(AEA) • • • • • • • • • • • Сфера применения оценки Управление Качество и независимость Прозрачность Аналитические методы Ресурсы Профессиональный компетенции Планы по оценке Распространение результатов Процедуры и политика по оценке Институционализация (центры по оценке, координаторы по оценке, комбинированный вариант, роль исполнительной и законодательной власти, офиса аудита) Что дальше ? Что дальше ? • Шаг 1. Осмыслить проблему • Шаг 2. • Шаг 3. Создать рабочую групу IPEN по разработке рекомендаций для правительств по развитию способности к оценке • Шаг 4. Определить структуру документа • Шаг 5. Разработать • Шаг 6. Представить на следующей конференции • Шаг 7. Адвокационная компания в странах Спасибо за внимание! УАО на FaceBook: https://www.facebook.com/groups/Ukr.evaluationsociety/ Ел.адрес: [email protected] [email protected]
