ВУЗ: Не указан
Категория: Не указан
Дисциплина: Не указана
Добавлен: 19.11.2019
Просмотров: 8773
Скачиваний: 12
76
отчеты сотрудников, человек, проводящий оценку, использует более
методичные и точные научные методы социального исследования. При
оценке ставятся четкие вопросы, проводится систематический сбор
информации от разных людей, вовлеченных в программу. Иногда
полученные данные представлены с использованием количественных
параметров («23% участников», «85 баллов»), в виде таблиц и диаграмм
или в виде повествования. Затем делаются выводы о том, как была
проведена программа, какова ее эффективность.
Оценивать
можно
и
политику,
в
частности,
декларации
государственных интересов, официально принятые заявления целей,
связанные с определенной деятельностью, направленной на реализацию
этих целей.
Сферы применения оценочных исследований многочисленны.
Оценка может проводиться в организации: в этом случае полезно
применять подходы, сложившиеся в организационной антропологии и
социологии. Здесь важно учитывать особенности организационного
контекста, в частности, те властные отношения, которые влияют на
позицию респондентов. В организационных исследованиях активно
применяются методы включенного наблюдения, анализа документов,
интервью.
Исследования
организаций
могут
быть
представлены
следующими примерами: анализ проблем взаимодействия специалистов и
клиентов в Центре планирования семьи, Центре помощи женщинам, семье
и детям; изучение трудовых отношений и управления в частном бизнесе;
социально-психологическое самочувствие пациентов в медицинском
учреждении. Выясняя явные и скрытые установки сотрудников, ценности
организационной культуры, механизмы власти и контроля, степень
удовлетворенности клиентов, исследователи могут проводить оценку
эффективности, вырабатывать рекомендации по повышению качества
обслуживания.
В практике социальной работы и реализации социальной политики в
силу сложности и многоплановости задач нет единой и общепризнанной
методики оценки программ социально-экономического развития. В
мировом
сообществе
оценщиков,
принадлежащих
к
разным
управленческим и аналитическим школам, пока не сложилось единого
терминологического поля даже в тематике мониторинга и оценки
проектов. Поэтому говорить в настоящее время о создании универсальной
для всех городов и программ любого типа методики оценки программ вряд
ли возможно. Можно говорить лишь о методических подходах к
проведению оценки, определяющих общие принципы и логику оценочной
деятельности. Но планировать оценку, выбирать ее параметры и способы
их измерения необходимо в каждом конкретном случае отдельно.
Универсальной формулы проведения оценки не существует,
поскольку программы и организации весьма разнообразны. Многое
77
зависит от того, как будет использоваться исследование: например,
необходимо ли оно для принятия решения или прояснения положения, для
лучшего понимания того, как работает программа. Многое, к сожалению,
зависит от ограничений во времени, месте, доступности информации,
квалификации исследователей, отношений в исследуемой организации.
Играет роль и финансирование, которое существенно влияет на объем
деятельности по оценке и продолжительность исследования. Зачастую
возможность
оценивать
негативные
стороны
или
результаты
ограничивается заказчиком или руководством организации.
При проведении оценки необходимо правильно поставить вопросы,
выбрать форму исследования, суметь собрать и проанализировать
информацию, проинтерпретировать полученные данные, кроме того,
нужно уметь достигать компромисс с организацией или сотрудниками
программы, но в то же время быть готовым защищать до конца те
моменты, по отношению к которым компромисс невозможен. К тому же,
необходимо иметь навыки распространения полученных результатов с
целью улучшения политики и программ: готовить отчеты и оформлять их
в публикации различных жанров.
В зависимости от задач выделяют
оценки
результативности
и
эффективности
.
Оценка результативности
–
это экспертиза организационного процесса
выполнения программы, анализ причин отклонений в реализации программы от
намеченных
изначально
целей.
Оценка
эффективности
–
сопоставление
результатов программы с затраченными в ходе ее реализации ресурсами.
Таким образом, в фокусе оценки могут оказаться
процесс
и/или
результаты
программы. Если оценка концентрируется на изучении
процесса реализации программы, то внимание уделяется соответствию
программы предписанному плану (замыслу) или тому, что происходит.
Если же цель оценки – результат и эффект программы для ее
бенефициариев, или благополучателей (т.е. тех людей или целевых групп,
на улучшение жизни которых направлена программа), в этом случае
пытаются найти ответ на вопрос: «Получают участники все то, что
планировалось?» или «Как влияет на них программа?» Очень часто
оценивают и процесс осуществления программы, и результаты (Ваисс,
2003). Причем результаты или эффекты программы могут быть как
прямыми, так и побочными, ожидаемыми и неожидаемыми.
Откуда же берутся стандарты для сравнения? Получив информацию
о процессе и результатах, проводят оценку достоинств программы по
сравнению
с
определенными
ожиданиями.
Независимо
от
того,
оценивается процесс или результаты, выражается мнение. К примеру, если
проводилась программа, направленная на уменьшение количества
78
беременностей среди девушек подросткового возраста, эксплицитным
стандартом будет уменьшение количества беременностей среди участниц
программы. Но оцениваться могут не только официальные цели
программы, которые могли измениться во время осуществления
программы. На данном этапе целью может быть обучение гигиене
беременных. В таком случае критериями становятся здоровье беременной и
ребенка. Другие стандарты определяются ожиданиями других участников
программы. Цели спонсоров, менеджеров, сотрудников и участников
программы могут стать критериями оценки. Иногда оценка представляет
определенную информацию о программе, оставляя за читателем право
судить о ее достоинствах.
Цель оценки, ее вклад в улучшение программы или политики
определяют критерии и методы оценивания. Оценка способствует
улучшению программ и выделению средств на лучшие программы.
Опираясь на результаты оценки, уполномоченные лица должны принимать
мудрые решения, а те, кто проводит оценку, получать удовлетворение от
вклада в совершенствование программы. На оценочные исследования
уходит больше времени и сил, по сравнению с интуитивной оценкой,
которой нередко довольствуются руководители и сотрудники социальных
служб, но оценочные исследования точнее, что особенно важно, если:
а) оцениваемый результат сложен, его трудно проследить, он состоит из
множества разнообразных элементов; б) будущие решения важны и
требуют больших материальных затрат; в) данные необходимы для того,
чтобы убедить людей в состоятельности выводов.
В России осуществляется множество социальных программ и
постоянно появляется необходимость в новых: это программы помощи
бездомным, ВИЧ-инфицированным и больным СПИДом, профилактики
наркотизации среди молодежи. Некоторые новые программы являются
логическим продолжением уже реализованных программ, а в другие
внесены радикальные изменения. Осуществляя оценку, мы задаем
следующие вопросы. Как осуществляется программа? С какой целью ее
проводят? Осуществляется ли она в соответствии с намеченным планом?
Каковы результаты, цели программы? Стоит ли она вложенных средств?
Необходимо ли ее продолжать, расширять, урезать, менять, не доводить до
конца? Каким образом определяются участники программы? Нужна ли она
всем или только определенным категориям людей?
Если программу осуществляет частная компания, многое может
решать рынок: спрос на услугу среди населения и конкуренция между
разными организациями, качество услуг может влиять на уровень
удовлетворенности пользователей и, следовательно, на их выбор в пользу
данного или другого сервиса. Существует представление, что «рынок все
расставит по своим местам», т.е. со временем плохие программы исчезнут с
рынка, останутся только хорошие. Однако, если программу осуществляет
79
государственная или некоммерческая организация, то удовлетворенность
пользователей обычно не имеет большого значения: ведь программа может
быть единственной в городе или районе, нацеленной на определенную
группу людей, предоставляющей данный вид услуг бесплатно. В этом
случае она будет осуществляться независимо от спроса и мнения клиентов.
В свою очередь, частные фирмы могут организовывать подобные
программы для своих сотрудников, при этом их качество тоже не зависит
от того, насколько удовлетворен клиент. В то же время многих
организаторов программ заботят вопросы, какой же эффект имеют
государственные или частные инвестиции; соответствуют ли затраты тому
качеству, которым характеризуются услуги; получены ли ожидаемые
результаты, и соответствуют ли они поставленным целям; насколько
адекватны применяемые методы принципам программы; можно ли
уменьшить расходы, увеличить результативность. На эти вопросы трудно
ответить, не проведя систематического оценивания.
Пример: Школьные ранцы
Вопрос: В ходе реализации программы по повышению качества жизни детей из
малообеспеченных семей мигрантов, стоящих на учете в социальных службах, в канун
учебного года были закуплены и переданы в качестве материальной помощи 30 ранцев
со школьными принадлежностями стоимостью по 500 рублей каждый. Как может быть
произведена оценка результативности этого проекта?
Ответ: Здесь можно использовать несколько типов оценки и оценивать разные
аспекты программы. Можно спросить родителей детей, получивших ранцы, о том,
насколько существенной была эта материальная помощь в ходе подготовки ребенка к
учебному году. Если ответы укажут, что не очень существенная, то можно сделать
вывод о неправильном отборе целевой группы или незначительности материальной
поддержки. Можно провести подсчет той доли, которую составляют 500 рублей в
общем бюджете семьи, получившей поддержку.
Другим аспектом проблемы является подсчет доли детей, получивших
материальную помощь, в общем объеме детей из семей мигрантов, в такой помощи
нуждающихся. Если общее количество детей, стоящих на учете, составляет 3000, то
охват такой программы всего 0,01%, что трудно назвать успехом в борьбе с бедностью
среди мигрантов. Распределение таких ограниченных ресурсов часто актуализирует
дискуссии о справедливости среди получателей помощи и может привести к
негативным побочным последствиям.
Применительно к социальной политике и социальной работе,
оценка – это ответ на вопрос, насколько успешна оцениваемая социальная
программа. Однако ответить на вопрос, что такое успех программы, не так
просто. Критерии успешности программы могут быть самыми разными.
Это зависит от того, кто заинтересован в проведении оценки программы,
какие результаты он хочет получить и как будет их использовать. Если к
тому же учесть, что социальные программы весьма разнообразны, то
возникает вывод, что один из важнейших атрибутов оценки и ее исходная
точка – это цель оценки.
80
Оценка социальной программы может быть вызвана самыми
разными потребностями, например: анализ выполнения программы;
корректировка содержания программы (в том числе уточнение целей и
задач, переориентирование программы на реалистичные результаты);
попытка активизировать работу по выполнению программы; повышение
эффективности сбора данных; экспертиза дополнительных ресурсных
потребностей; анализ причин успехов и неудач выполнения программы;
учет ошибок и недостатков программы при разработке других проектов;
привлечение
внимания
общественности;
информирование
лиц
и
организаций, принимающих решения; защита программы от критики;
анализ разногласий, возникших среди исполнителей по ходу реализации
программы.
Оценку можно проводить на разных этапах реализации программы.
Предварительную оценку – до начала запуска программы для анализа ее
качества и соответствия потребностям города; промежуточную – во время
реализации программы для оценки ее первичных результатов и
корректировки в случае необходимости; обобщающую – после завершения
программы для анализа ее результатов, учета ее недостатков и
преимуществ при разработке следующих программ.
Этап подготовки и планирования оценки столь же важен, сколь и ее
результаты. Ключевое место в нем занимает структура (или дизайн)
оценки. Структура оценки определяет состав и план работ, а также, какая
информация необходима для проведения оценки, как она будет получена и
с помощью каких методов обработана; сколько времени уйдет на
проведение оценки и какие ресурсы понадобятся для ее проведения.
Формативная оценка
помогает менеджерам программ, практикам,
специалистам, планирующим программу, улучшить программу в процессе
ее
разработки.
Суммативная оценка
проводится для предоставления
информации по завершении программы или, по крайней мере, одного из ее
циклов, касательно ее продолжения, прекращения, коренного изменения.
Оценка процесса/результатов проводится в течение программы и по ее
завершении (Ваисс, 2003).
Формативная
оценка
позволяет
улучшить
работы
программы,
отформатировать программу до ее завершения.
Суммативная оценка
позволяет сделать заключение об эффективности завершенной программы.
Оценку могут проводить штатные сотрудники или нанятые
организации. По отношению к тому, кто осуществляет оценку, она может
быть
внутренней
(ее еще называют
самооценкой
) или
внешней
. Внешняя
проводится приглашенным
специалистом. При этом важно, чтобы он не
только не работал в организации, но и не был связан с ней отношениями,
которые можно расценить как конфликт интересов (например, такой