Приложение №7 Компетенции, необходимые специалисту для проведения оценки программ. «Если бы у меня был только один час, чтобы решить задачу и моя жизнь зависела бы от решения этой задачи, то я бы потратил первые 55 минут на то, чтобы правильно сформулировать вопрос. И как только у меня будет такой вопрос, я решу задачу за оставшиеся 5 минут» (Альберт Эйнштейн) У исполнителей программ должно быть сформировано четкое понимание важности проведения оценки. Помимо этого для осуществления оценки нужен компетентный специалист. На сегодняшний день оценка программ стала сферой деятельности и в большинстве случаев специализацией тех людей, которые ею занимаются. Ключевыми характеристиками любой профессии являются компетенции, этические правила, нормы и стандарты. Под компетенциями оценщика принято понимать «знания, навыки и отношения к работе, которые нужны, чтобы проводить оценку качественно, результативно и эффективно». 1 В международном экспертном сообществе основными компетенциями специалистов по оценке программ принято считать:2 Навыки проведения систематических исследований • • • формулирование вопросов исследования, разработка дизайна исследования и оценки, разработка инструментов оценки, сбор и анализ данных; формулирование суждений, выводов и разработка рекомендаций; написание отчетов. Профессиональная практика • • • умение выявлять потребности пользователей информации, полученной в ходе оценки; умения в проведении анализа ситуации (понимание среды, в которой реализуется программа: организационное развитие, анализ политического контекста, учет уникальности объекта оценки); управленческие навыки (управление оценкой как проектом: написание предложений по содержанию и дизайну оценки, разработка бюджета оценки, оценка необходимых ресурсов, управление командой, обучение других людей, умение планировать свою деятельность и своевременно реализовывать планы, управление стрессом). Навыки рефлексии умение взглянуть на ситуацию со стороны и проанализировать происходящие изменения; постоянный профессиональный рост. Навыки общения с людьми • логическое и критическое мышление; • устная и письменная коммуникация; • межличностное взаимодействие (навыки ведения переговоров, фасилитации и командной работы; кросскультурная компетентность). разрешения конфликтов, В процессе поиска оценщиков исполнители программ разрабатывают собственные квалификационные требования к специалисту по оценке программ. Зачастую эти требования, подготовленные разными организациями, совпадают. В обязанности специалиста по оценке программ входит выполнение следующих функций: 1 изучение текущей ситуации; выявление причин тех проблем, с которыми сталкивается программа; разработка логики влияния программы; анализ вариантов стратегии программы; определение полученных в результате выполнения программы уроков; изучение результатов программы и их влияния; разработка рекомендаций по совершенствованию программы и оптимизации использования ресурсов. Кенел Жак «Профессионализация оценки», Оценка программ: методология и практика, 2009г. Jean A. King Essential Competencies for Program Evaluators http://comm.eval.org/eval/resources/viewdocument?DocumentKey=36c643b51f96-4454-8dd1-fd5fc7c95168 2 Специалист по оценке программ должен не только уметь собирать достоверную качественную и количественную информацию, проводить ее тщательный анализ и быть наблюдательным, но и обладать знаниями по теме оцениваемой программы. Так, специалист, привлекающийся к оценке детских программ, должен обладать общими знаниями в области возрастной и педагогической психологии, руководствоваться нормами международного права в области защиты детей, понимать специфику социальных программ сферы детства. Однако, даже при достаточной квалификации специалиста в ходе оценки программы с участием детей могут возникать трудности, этически спорные ситуации и вопросы, касающиеся интересов детейучастников программ[1]. Речь идет о часто встречающихся в практике неопределенных ситуациях, в которых специалисты сталкиваются , например, со следующими проблемами: необходимость нейтрализовать или минимизировать влияние взрослых при опросе детей, участвующих в программе; определение методов сбора информации при работе с группой детей разного возраста (индивидуальное или групповое интервью, анкетирование или наблюдение); необходимость учитывать мнение детей, девочек или мальчиков, если в коллективе они образуют меньшинство, либо если есть немногочисленные представители этнических групп; учета интересов детей с физическими/ментальными особенностями и т.д.; определение формата участия детей в оценке, кроме участия их в качестве источников информации; необходимость учитывать представления, мнения, возможные стереотипы и установки взрослых, работающих с детьми; необходимость обоснования решения о предоставлении / непредоставлении детям вознаграждения за участие в оценочном исследовании и выбора его формы; И т.д. В таких ситуациях специалист по оценке должен руководствоваться профессиональными стандартами в соответствии с обстоятельствами: вести себя согласно требованиям профессиональной этики, выражать открытость мнениям других, проявлять гибкость и адаптивность. Для принятия взвешенного решения по каждому из возникающих вопросов оценщику нужно постоянно находиться не только в исследовательской, но и в рефлексивной позиции по отношению к происходящему. Профессиональная рефлексия – одновременно с вниманием и чувствительностью оценщика программ к противоречиям устройства и проблемам самой сферы детства – является важным инструментом осознания специалистом своей собственной позиции по отношению к процессу и результатам оценки и тесно связана с профессиональными стандартами и этикой оценки. От специалиста по оценке требуется глубокая личностная приверженность соблюдению этических принципов оценки, а также знание и соблюдение прав человека и ребенка. Чаще всего оценку даже небольшой программы в сфере детства одному специалисту проводить достаточно сложно, поскольку оценка программы является трудоемким процессом, который требует широких компетенций и непредвзятости суждений. Именно поэтому имеет смысл формировать команду оценщиков. Для оценки программы, особенно в сфере детства, рекомендуется формировать смешанные команды с участием экспертов в предметной области оцениваемой программы 3 и специалистов по оценке программ и проектов. Формированием команды оценщиков занимается руководитель проводимой оценки. Критериями формирования команды обычно выступают образование и опыт работы специалистов. При наборе команды оценщиков помимо профессиональных требований необходимо также учитывать ряд следующих качеств: умение работать в группе; самостоятельность, предприимчивость; желание брать ответственность за принимаемые решения; умение принимать рискованные решения, работать в условиях неопределенности; коммуникабельность, устойчивость к стрессам; низкий уровень конфликтности; соответствие ценностных установок специалиста целям и ценностям оценки; высокая обучаемость и способность к инновационному мышлению. Одним из принципов командной работы выступает распределение обязанностей и ответственности за достижение поставленных целей, а не жесткое закрепление за каждым определенных функций. Для 3 Приглашение специалистов, признанных экспертами в предметной области оцениваемой программы, является наиболее сложным моментом при формировании команды для оценки. Знания и убеждения эксперта, основанные на предыдущем опыте, сами по себе являются определенным фильтром для восприятия результатов программы. Парадоксально, но экспертные знания могут стать барьером для восприятия событий, произошедших в ходе программы. эффективной организации работы команды необходимы: 1) четкое распределение ролей и обязанностей; 2) осознание всеми членами команды целей и задач оценки программы; 3) учет и личностных, и профессиональных качеств специалистов при объединении их в команду; 4) установление дружеской рабочей атмосферы. Необходимо помнить, что оценка программ – вспомогательная, или т.н. сервисная дисциплина, обслуживающая интересы разных профессиональных областей: образования, здравоохранения, социальной защиты и т.д. В области оценки накоплена база знаний как о факторах, которые влияют на эффективность программ, так и о принципах, методах и способах проведения оценки. Следует отметить, что оценкой проектов и программ занимаются и экономисты, и представители различных общественных наук, при этом зачастую у них могут отсутствовать необходимые для этого знания и опыт. В связи с этим существует очевидная потребность в углублении понимания компетенций, необходимых для проведения оценки, как ее исполнителями, так и потенциальными пользователями.