Ю.В. Хайцева Методология проектного мониторинга Проектная культура становится в последнее время более значимой не только в работе общественных некоммерческих организаций, но и в деятельности государственных учреждений. Известно, что вырастить плодоносящее дерево достаточно сложно. В течение всего роста требуется уход, наблюдение, своевременное предотвращение угроз, составление прогнозов развития, отслеживание на предмет соответствия нормам. По этой же аналогии строятся принципы и проектного управления. Каждый реализуемый проект должен приносить определенный плод, решать проблемы общества. Для того, чтобы плод проекта получился адекватно-ожидаемым кто-то должен создавать его стандарт, кто-то постоянно корректировать ход проекта в соответствии с новыми условиями, кто-то должен использовать результат проекта, кто-то отслеживать как применяются результаты проекта. Такая система непрерывного наблюдения за состоянием проекта, его ходом называется мониторингом. Цели мониторинга: изучение процесса освоения средств, выделенных на проект, оценка степени вовлечения общественности в проект, в процесс принятия решений относительно целей использования, распределения средств, выявление хода и результатов реализации проекта в любой из моментов времени (констатирующая цель), выявление недостатков и отклонений в ходе реализации проекта и своевременном проведении мер коррекции (корректирующая цель), обеспечение накоплением информации, позволяющей выстраивать прогнозы социальных последствий и образовательных эффектов от реализации проекта (прогностическая цель). Имея в качестве инструмента оценки набор форм и методов (систему), проектоисполнитель по окончании своего мероприятия может определить: насколько достигнуты цели проекта, насколько по окончании проекта изменилась ситуация, описанная в его проекте в разделе «Постановка/ описание проблемы», не имел ли проект какого-либо неожиданного положительного или отрицательного эффекта, насколько оптимальными были методы достижения целей проекта, что мешало и что способствовало достижению целей проекта. Мониторинг имеет следующие виды: А). По характеру используемых методов и методик: → статистический мониторинг базируется на данных статистической отчетности, четко отлаженной и регламентированной системе сбора информации (результаты представляются в графиках, рейтингах, аналитических справках) → нестатистический мониторинг основывается на самостоятельно разрабатываемых показателях и методах сбора информации, позволяет выявить тенденции в спросе на проект, процесс реализации проекта и пр. (результаты представляются в графиках, фотографиях, статьях СМИ, сводных справках). Б). По направленности: → мониторинг условий – оценка соответствий в требованиях, обязательствах, предложениях проектоисполнителей; оценка соответствий во взаимных обязательствах договаривающихся сторон (донор - проектоисполнитель); оценка обстановки в которой реализуется проект. → мониторинг процесса - оценка совокупности последовательных действий, направленных на достижение результата проекта. → мониторинг результата – оценка следствия и развития проекта. Статистические методы сбора данных: Анализ имеющихся официальных статистик по региону, находящемуся под влиянием проекта (сколько проживает, сколько принадлежит гипотетически к целевой группе проекта, уровень образования, гендерная статистика, возрастная статистика и пр.) Анализ базы данных участников, созданного в рамках реализации проекта ( сколько участвовало фактически, по каким причинам, кто не участвовал, по каким причинам, сколько обратилось всего, откуда узнали о проекте, степень удовлетворенности участников и пр.) Бюджетный анализ (сколько финансовых средств предусмотрено на подобные проекты в региональных структурах, сколько освоено, сколько средств необходимо, сколько средств удалось привлечь, на какие программные мероприятия не удалось привлечь средства и почему, имеется ли динамика увеличения бюджета на подобные проекты в регионе и пр.) Анализ проблемного поля (какие проекты и сколько было проведено для решения подобной проблемы, кем они были проведены, какова их эффективность, наличие статистик по эффективности ранее проводимых проектов и пр.) Анализ предложений по месту проведения проекта (сколько предложений поступило вообще, какова стоимость предлагаемых мест, каковы предлагаемые условия и пр.) Охват экологической акцией в Х обл. 14000 11896 12000 10300 10120 10000 8520 8000 Население 5623 6000 Охвачено акцией 4523 3250 4000 2000 2563 2541 1589 0 Район А Район Б Район В Район Г Район Д Пример статистической диаграммы по охвату населения экологической акцией. Нестатистические методы сбора данных: Наблюдение- метод сбора и простейшего обобщения первичной информации путем непосредственного изучения социального явления в естественных для него условиях. Единицами информации наблюдения являются зафиксированные акты вербальной и невербальной коммуникации. Данный метод применяется для изучения неформальных отношений внутри того или иного сообщества ( например наблюдение за участниками проекта: эмоции, поведение, настроение в общей массе, мимика, жесты и пр.) Интервью - неформальная личная беседа, проводимая по заранее намеченному плану и основанная на использовании методик, побуждающих респондентов к продолжительным и обстоятельным рассуждениям по интересующим интервьюера вопросам. Интервью предполагает получение от респондента развернутых ответов на вопросы исследования о проекте. Сценарий полуструктурированного интервью с руководителем проекта ХХХ 1. Каковы перспективы развития проекта в регионе? 2. Что необходимо сделать для более эффективного развития проекта? Для увеличения числа участников? 3. Какие задачи решает проект? 4. Какие задачи он должен решать? 5. В чем сильные и слабые стороны проекта? 6. Каким образом Вы отслеживаете эффективность проекта? 7. Каковы альтернативные проекты в регионе? 8. В чем заключаются сложности? 9. В чем заключается Ваш мотив участия в проекте? 10. Кто является большинством заявителей на участие в проекте? Каким образом предусмотрена обратная связь с участниками. Пример сценария интервью с руководителем проекта Фокус-группа позволяет решить разносторонние задачи, которые включают: - получение информации о том, что люди думают, представляют или воспринимают проект, - проверку собственных выводов по тем или иным событиям проекта, - стимулирование обсуждения по поставленной теме, - «провокацию» неожиданной реакции людей на спонтанные реплики аудитории на поставленную тему, - предоставление возможности ведущему фокус-группы и аудитории получить дополнительную информацию по заданной теме. Проведение фокус-группы Для того, чтобы поставить четкие цели и получить достоверную информацию необходимо конкретно представлять себе какова цель проведения фокус-группы. Расплывчатые общие цели, например, «узнать, что люди думают…» усложнят процесс обработки результатов. Фокус-группа проводится в течение 1,5-2 часов, принцип участия добровольный. Группа должна состоять минимально из 5-6 максимально 12-15 человек. Ведущий заранее оговаривает с участниками цели фокус-группы ( собрать данные о проекте и сделать рекомендации и выводы для дальнейшего улучшения), назначает время и место встречи, разрабатывает сценарий. Ответы участников можно фиксировать, на диктофон, видео или предоставлять время участникам после каждого вопроса записывать их ключевые ответы. Вопросы для фокус-группы (участники проекта). С какой целью Вы участвуете в проекте? Каким образом возможно влияние проекта на Вашу жизнь? Каковы сильные и слабые стороны проекта? Каким образом можно усилить проект? Что бы Вы хотели изменить в организации проекта? Как Вы узнали о проекте? Рекомендовали бы Вы проект своим друзьям /родственникам? Сколько на Ваш взгляд могло бы стоить место участника проекта? 9. Каким образом планируете использование навыков полученных в проекте? 10. Какова роль проекта для Вашего региона? 1. 2. 3. 4. 5. 6. 7. 8. Отчетность можно разделить по следующим видам: а) по содержанию -на программные (описательный) и финансовые; б) по времени предоставления - на промежуточные (квартальные, полугодовые, годовые) и итоговые. Отчеты составляются в соответствии с требованиями, содержащимися в договоре о выделении средств на проект. Итоговый отчет, характеризующий степень достижения целей и выполнения задач, представляется в установленный срок по завершении проекта. Информация из отчета может быть использована донором в публичных документах, а также специальных тематических отчетах, направляемых в другие организации. Финансовая отчетность ведется в соответствии с законодательством государства. Мониторинг СМИ включает подсчет числа сообщений, посвященных проекту, их объем, продолжительность освещения по ТВ. Или это доля газетной полосы, количество сообщений по разным задачам проекта - экономика, занятость, социальная защита и пр. Немаловажным фактором является также и фиксирование выхода новостных репортажей по ТВ по времени (удобное/ неудобное время), а также многоязычие в подаче новостей. Телефонное интервью- это экономичный способ контакта с людьми, сокращающий транспортные и временные расходы. В телефонной интервью можно исследовать настоящую или гипотетическую целевую группу проекта на предмет информированности или неинформированности о проекте, мотива участия или неучастия, предложениях о повышении эффективности проекта, степени удовлетворенности проектом. Уличный опрос используется для решения широкого круга маркетинговых задач проекта. Уличные опросы проводятся, как правило, в местах массовых скоплений (площади, выход из торговых точек, парки и пр.). Явным преимуществом такого опроса являются высокая скорость проведения опроса, возможность опрашивать специфические группы. Анализ сопроводительных документов по проекту может применяться в мониторинге: - как основной и единственный; - в сочетании с другими методами мониторинга (такой способ использования этого метода является наиболее целесообразным и применяется чаще всего). Как правило, метод анализа документов применяется в сочетании с опросом; - как вспомогательный метод обработки данных, полученных другими методами (обработка открытых ответов анкет и интервью, а также для уточнения этих данных). В мониторинге документальным материалом является любая информация, фиксированная в печатном и рукописном виде, а также на магнитной ленте, цифровых носителях, на фото- или кинопленке. При изучении документации необходимо ответить на вопросы: 1. Что представляет собой документ? 2. В каком контексте он был создан? 3. Кто его автор? 4. Каковы цели создания документа? 5. Какова надежность самого документа? 6. Какова достоверность зафиксированных в нем данных? 7. Каков общественный резонанс документа? 8. Каково фактическое содержание документа? 9. Каково оценочное содержание документа? Анкетный опрос - наиболее популярный способ получения информации о проекте. Он осуществляется, как правило, заочно, без прямого и непосредственного контакта с интервьюерами. К его достоинствам относится то, что он позволяет получить сжатые сроки и в больших объемах информацию, поддающуюся формализации, что важно для дальнейшего анализа, при относительно невысоких затратах. Структура анкеты включает: - преамбулу, как средство мотивации респондентов к заполнению, формирования его установки на искренность ответов, содержащую также описание целей опроса и комментарии по заполнению анкеты, - основную часть анкеты (опросный лист), - паспортичку, в которой содержится информация о социально-демографических признаках респондентов. Следует принять во внимание, что объем работы с анкетой не должен превышать 20 минут, экспериментально зафиксировано, что через это время внимание респондентов резко падает. Опросные методы весьма разнообразны, наряду с общеизвестным анкетированием используются опросы, проводимые посредством различных средств коммуникации (почта, телефон, пресса и пр.). Проведению опроса должна предшествовать разработка программы, постановка целей. Каждый опрос предполагает упорядоченный набор вопросов, служащий достижению цели мониторинга, решению его задач. Использованные материалы: 1. Мониторинг качества, статистика и социология образования. Агранович М.. НФПК. 2006. Университетская книга. 2. Материалы сети интернет.