ВУЗ: Не указан
Категория: Не указан
Дисциплина: Не указана
Добавлен: 19.11.2019
Просмотров: 8774
Скачиваний: 12
81
специалист не должен быть прямым родственником кого-либо из
руководителей организации или одним из тех, кто получает от нее
помощь). Оценку, проводимую приглашенным экспертом, еще называют
независимой оценкой.
Внутренняя оценка или самооценка осуществляется теми же самыми
людьми, которые работают в организации. Это проще и сложнее
одновременно, потому что, с одной стороны, кто же знает организацию
лучше, чем ее сотрудники, а с другой, проведение такой оценки потребует
дополнительных усилий, а иногда и мужества, чтобы «подняться над
ситуацией» и быть действительно объективными.
Оба способа имеют свои преимущества. Штатные сотрудники знают
больше об организации, ее интересах и потребностях, возможностях
применения полученных результатов. У них больше возможностей
распространения
полученной
информации.
Нанятые
организации
независимы, престижны, предоставляют больше навыков и умений. У них
есть
возможность
распространения
полученной
информации
вне
организации.
Нередко к оценке привлекаются эксперты или группа экспертов –
специалистов из разных областей, имеющих знания о других программах
и большой опыт проведения экспертизы или работы в проектах. Эксперт
может непредвзято рассматривать программу, но у него могут быть
определенные предпочтения, которые повлияют на его суждение. Даже
высококвалифицированный
эксперт
опирается
на
субъективные
стандарты, в которых можно усомниться. Неудовлетворительный отчет
поставит под сомнение опыт и репутацию эксперта. Поэтому, проводя
большинство оценок, пытаются использовать наименее уязвимые методы
и следовать основным принципам оценки.
Принципы оценки программ*
I. Основой оценки программ может быть только точная и достоверная
информация.
II. Исполнение работы по оценке должно быть компетентным.
III. Специалисты по оценке программ гарантируют честность и открытость всего
процесса оценки.
IV. Специалисты по оценке программ уважают безопасность и достоинство
людей, с которыми они взаимодействуют в процессе своей профессиональной
деятельности.
V. Специалисты по оценке программ имеют профессиональные обязательства,
определяющиеся общественными интересами и общественным благом.
*Источник: Международная сеть оценки программ (
IPEN
):
http://www.ipen21.org.
Помимо разделения оценок на формативные и суммативные, в
соответствии с тем, когда проводятся оценки, они подразделяется на
предварительные
,
промежуточные
и
завершающие
. Предварительная
проводится на этапе планирования проекта, при этом оценивается не
82
реализация, а предложение вашей будущей работы. Промежуточная
оценка
осуществляется
во
время
исполнения
программы
или
проекта, чтобы помочь более успешно достичь намеченных целей и
привести к планируемым результатам. Эту оценку также проводят,
если в ходе реализации проекта возникли проблемы, причины
появления которых неясны. В данном случае говорят о диагностической
оценке, которая служит возвращению проекта «на путь истинный».
Завершающее оценивание бывает незадолго до завершения проекта
или сразу же после него. Оно позволяет понять, что собой представляет
проект, достигнуты ли его цели, получены ли планируемые результаты.
Если же программу предполагается повторять где-либо еще, завершающая
оценка поможет избежать ошибок при реализации подобных проектов в
будущем.
Можно также проводить оценку «постфактум». Она проводится
обязательно через какое-то время (скажем, через полгода или год) после
того, как проект полностью завершен и можно проанализировать его
воздействие. В ходе подобной оценки обычно анализируются все (или
почти все) изменения, вызванные проектом, и то, насколько они
стабильны, т. е. сохраняются ли изменения без дальнейшего воздействия
со стороны проекта. Для того, чтобы ответить на вопросы оценки, разумно
оценивать не всю программу целиком, а ее отдельные ключевые (согласно
вопросам) аспекты, которые и подвергаются прицельному анализу. В
качестве
параметров
оценки
могут
выделяться,
в
том
числе
результативность программы, эффективность организации выполнения
программы, социально-экономический эффект, оказываемый программой
на решение социальных задач, соответствие программы интересам
целевых групп населения.
Цели оценки
могут быть разные, они зависят от ожиданий и
потребностей различных акторов: во-первых, кто организовал оценку, во-
вторых, как повлияет исследование на их деятельность, в-третьих, кто
принимает
окончательные
решения,
в-четвертых,
целевые
группы населения, которые являются благополучателями программы, – а
также от возможностей проведения исследования. Цели и задачи
оценки в каждом конкретном случае удобнее всего формулировать в виде
вопросов оценки
. Они могут быть самыми разными. Например, каковы
фактические результаты программы, и как они соотносятся с ее целями?
Как соотносятся средства, потраченные на выполнение программы, с
полученным
эффектом?
Выполнены
ли
все
мероприятия,
предусмотренные программой? Для всего этого оценка будет проводиться
по-разному, с использованием разных методов сбора и обработки
информации.
Ключевая задача любой оценки – улучшить работу проекта или
организации в целом, сделать ее деятельность более эффективной и
83
полезной. Наиболее часто подвергаются оцениванию финансовая
эффективность, устойчивость и результаты проекта или организации, а
также эффективность управления и методология. При этом ставятся
вопросы, перечисленные в табл. 3 (Бодунген, 2001).
Таблица 3
Вопросы для оценки
Что
оценивается
Вопросы
Финансовая
эффективность
проекта
Насколько приемлемо соотношение ресурсов, вовлеченных в
проект (в целом и/или для осуществления отдельных этапов), и его
результатов? Можно ли добиться удешевления подобных проектов
в будущем, сохранив то же качество и тот же объем результатов?
Эффективность
управления
проектом
Соответствует ли выбранная схема управления типу проекта и
осуществляемым видам деятельности?
Способствовала ли она успешной реализации проекта?
Достаточно ли гибко руководители проекта реагировали на
изменения, влиявшие на ход проекта?
Насколько правильными (ошибочными) были принимаемые
решения?
Методология
проекта
Все ли методы привели к достижению заявленных результатов?
Какие методы оказались наиболее (наименее) эффективными?
Устойчивость
проекта
Будет ли работать этот проект при его повторении в другом месте?
Сохранил ли проект актуальность, соответствует ли он
сегодняшнему дню?
Будет
ли
жизнеспособен
проект
после
завершения
его
специального финансирования? (Как правило, этот вопрос
особенно волнует фонды.)
Полнота
решения
проблемы или
удовлетворения
потребности
В какой мере проектом решена заявленная проблема?
Можно ли говорить о том, что проблема решена кардинально, т. е.
не появится вновь?
Достаточно ли полно удовлетворены потребности клиентов
(подопечных) проекта?
Структура оценки – это методическая основа, ориентированная на
задачи и вопросы оценки и устанавливающая методы сбора и обработки
данных, план работ, ресурсное обеспечение, систему отчетности и
контроля исполнения проекта. Чтобы определить структуру оценки,
необходимо продумать, какая информация понадобится для ее проведения,
каким образом можно будет получить необходимые данные, кто именно
будет собирать информацию, какие методы анализа данных следует
применить, потребуется ли в ходе оценки консультация специалиста в
какой-либо области; потребуются ли помощники (например, для
проведения анкетирования или интервьюирования клиентов организации);
сколько времени понадобится для проведения оценки, какие ресурсы
нужны для этого.
84
Для тех, кто будет использовать результаты оценивания, важно
понимать не только, что и почему произошло, но и что нужно делать
.
Вот
почему непосредственно после оценки проделанного следует этап
корректировки планов. Например, проведение оценки деятельности одного
из реабилитационных центров, помогло точнее определить потребности
клиентов и соответственно более качественно и адресно предоставить
им услуги.
В том случае, когда деятельность организации в целом или
отдельные проекты направлены на предоставление конкретных услуг,
желательно представить «истории» о конкретных людях, чья жизнь
изменилась в результате осуществления проекта. Ведь отчеты только о
результатах, описанных в заявке, как правило, отражают проведение
запланированных мероприятий и не демонстрируют, изменилась ли как-то
ситуация для целевой группы после реализации проекта.
Иными словами, необходимо отслеживать воздействие проекта на
целевые группы «бенефициаров», т.е. «благополучателей», или клиентов.
Кроме того, для повышения эффективности деятельности организации
важно уделять внимание не только соответствию первоначальному плану
мероприятий, но и отслеживать причины успеха и неудач, чтобы повлиять
в дальнейшем на управленческие решения. Для этого следует еще на этапе
написания заявки продумать и включить в проект четкие показатели его
эффективности в долгосрочной перспективе: вызовет ли запланированный
цикл мероприятий желаемые изменения. По итогам проекта важно оценить
результаты относительно данных показателей: например, изменилось ли у
школьников после проведенного тренинга по вопросам инвалидности их
отношение к людям с инвалидностью и их проблемам (Боровых,
Грешнова, 2001).
Перед выбором параметров оценки очень важно детально разобраться
в логике самой программы, понять ее механизм, определить, что входит в
реальные задачи программы, как они соотносятся с набором программных
мероприятий и к чему они должны привести по плану. Для этого иногда
даже полезно представить механизм программы схематично или в виде
рисунка.
Важнейший
момент
при
изучении
программы
–
структурирование предполагаемых результатов программы. Итоги и
выводы большинства современных программ можно расположить в
определенном иерархическом порядке (рис. 1).
85
Ресурсы («вход»)
(финансовые,
кадровые,
технические
и
другие ресурсы и
усилия,
необходимые для
выполнения
программы)
Выполнение
мероприятий
(«выход»)
Непосредственные
результаты
Долгосрочные
результаты
(последствия,
качественные
изменения)
Эффект программы
(достижение
программных целей,
влияние программных
действий на решение
актуальной социальной
проблемы)
Рис. 1. Структура программы
Рассмотрим для примера программу развития самозанятости
инвалидов, содержательная основа которой – проведение курсов по
обучению инвалидов навыкам организации и ведения бизнеса и
предоставления кредитов вновь создаваемым фирмам (Как измерить…,
2002). Логическая последовательность результатов данной программы
будет выглядеть примерно так, как показано на рис. 2.
Ресурсы («вход»):
Различные
ресурсы,
затраченные
на
обучение
и
предоставленные в
виде кредитов.
Выполнение
мероприятий
(«выход»):
Проведены
обучающие
курсы, выдано
n-е количество
кредитов.
Непосредственные
результаты:
n-е число инвалидов
обучено навыкам
организации и ведения
бизнеса.
Долгосрочные
результаты:
Создание
устойчивых малых
предприятий
инвалидов.
Эффект программы
:
Рост занятости среди инвалидов, рост
благосостояния занятых инвалидов, рост
собственных доходов городского бюджета,
снижение расходов на социальное
обеспечение, развитие малого
предпринимательства.
Рис. 2. Программа самозанятости инвалидов