banner banner banner
Оценка эффективности НКО: методология и результаты исследования
Оценка эффективности НКО: методология и результаты исследования
Оценить:
Рейтинг: 0

Полная версия:

Оценка эффективности НКО: методология и результаты исследования

скачать книгу бесплатно


Как мы уже отмечали, внешнюю среду НКО формируют представители различных социальных групп и институтов, которые, в том или ином виде могут влиять на деятельность некоммерческих организаций. Представленные ниже программы как раз и призваны выявить содержание и значимость данного (взаимо)влияния. Начнем мы с самого массового объекта, чье влияние на результативность и эффективность работы НКО носит максимально опосредованный характер.

Программа № 1. «Соцзависимые»

Объект: Представители социальных групп, находящихся в непосредственной близости (и\или взаимодействующие) с наркозависимыми

География: Жители (соцзависимые) Екатеринбурга, Челябинска, Тюмени, Перми

Основные задачи Программы № 1.

Задачи состоят в выявлении содержания общественного мнения о деятельности НКО. В данном случае мы должны получить список параметров, значимых для оценки деятельности некоммерческих организаций со стороны людей, не имеющих постоянной (либо вообще никакой) практики взаимодействия с ними, но обладающих знанием о проблеме.

Метод сбора информации

Полуформализованное интервьюирование.

Конструкция выборки

Используется многоступенчатая территориальная случайная выборка.

Первая ступень отбора

Единицами отбора первой ступени являются столицы областей, на территории которых сосредоточена деятельность реабилитационных центров, работающих в области профилактики потребления ПАВ и реабилитации лиц, страдающих химической зависимостью. На этом этапе отбора в выборку попали следующие города: Екатеринбург, Челябинск, Пермь и Тюмень.

Вторая ступень отбора

В каждом городе на основе данных медицинской статистики и Территориальных управлений ФСКН России отбираются неблагополучные с точки зрения распространения наркотиков районы.

Третья ступень отбора

В каждом районе случайным образом формируется список «точек» для включения в опрос. В качестве «точек» отбираются школы, училища, колледжи и вузы. На основе данного отбора формируется маршрут интервьюера. Номера «точек» отбираются интервьюером произвольно.

Отбор респондента

Попадая на «точку» интервьюер отбирает на основе скрининговой анкеты (см. Приложение № 3.) респондентов для участия в основном опросе. В результате скрининга отбираются респонденты, которым а.) знакомы люди, регулярно употребляющие наркотики и б.) известны общественные организации, работающие в сфере противодействия распространению наркотиков. Размер выборки планировался из расчета, чтобы среди опрошенных оказалось не менее 400 респондентов.

Общие параметры выборки для одного города

Характеристика интервьюеров

Перед началом работы со всеми интервьюерами и супервайзерами проводится инструктаж по анкете и пилотажные интервью, направленные на ознакомление интервьюеров с вопросником, выявление возможных проблемных мест в анкете и определения степени подготовленности интервьюеров к полевым работам. К работе будет допущен лишь тот, кто имеет опыт работы с вопросниками и владеет надежными базисными знаниями в области ведения интервью.

Каждый интервьюер получает комплект полевых документов: точки опроса; маршрутный лист; анкеты; визитные карточки СООО АНЦ «Спасение» с указанием ФИО интервьюера.

Контроль полевого этапа

В ходе опроса в каждом городе контроль полевого этапа будет осуществляться супервайзерами, в функции которых входит:

1. проверка заполняемости анкет (запланированная и внезапная проверка процесса опроса),

2. проверка полноты заполняемых анкет (проверяется каждая анкета),

3. контроль сроков проведения опроса,

4. контроль выборки (проверка всех точек, попавших в опрос)

5. проверка правильности прохождения маршрута и заполнения маршрутного листа.

Итогом работы супервайзеров являются проверенные, полностью заполненные анкеты на 100% отражающие выборочную совокупность и отчет контроля качества выполнения полевых работ.

Эмпирическая интерпретация

Программа № 2. «Эксперты»

Объект: Представители различных социальных институтов, с которыми взаимодействуют НКО.

К их числу в рамках данного исследования относятся:

Представители органов власти (уровни субъекта федерации, муниципалитетов столичного города и города в области).

Представители социально-ответственного бизнеса.

Представители экспертного сообщества.

Лидеры некоммерческих организаций.

Журналисты, специализирующиеся на социальной тематике.

География: эксперты, осуществляющие свою деятельность на территории Свердловской, Тюменской, Челябинской и Пермской областей.

Основные задачи Программы № 2.

Аналитические задачи исследования направлены на выяснение специфики параметров оценки эффективности деятельности НКО представителями различных социальных групп.

Концепция анализа

Основная методологическая задача анализа данного исследования – это выделение аналитических категорий и создание в соответствии с ними массивов сгруппированных высказываний, которые позволят нам сформировать системное видение респондентами параметров эффективности деятельности НКО.

Итогом экспертного опроса является аналитический отчет, отражающий в себе структуру параметров оценки эффективности деятельности некоммерческих организаций с точки зрения основных социальных институтов, с которыми взаимодействуют НКО.

Метод сбора информации

Экспертный опрос методом глубинного интервьюирования

Обоснование метода

Использование данного метода обусловлено, с одной стороны, спецификой объектов нашего исследования, а с другой – возможностью получения необходимой глубины информации.

Специфика качественных методов состоит том, что, в отличие от количественных они дают более глубокую и детальную информацию (что люди думают, представляют или как воспринимают то или иное событие). Помимо этого, с методологической точки зрения, данные методы обладают определенной гибкостью и дают возможность в ходе их использования не только осуществлять проверку собственных выводов, но и расширять список аспектов, нюансов. Естественно, в сочетании с количественными методами, это позволит нам максимально приблизиться к получению комплексной картины.

Выборка и ее характеристики

Согласно методологии экспертных опросов, экспертная группа не может быть слишком многочисленной. Опыт показал, что за известными пределами увеличение числа экспертов не даст существенного прироста новой информации ни в деталях, ни, главное, по качеству. Необходимость ограничения численности экспертной группы выдвигает дополнительные методические требования к подбору экспертов. (На практике численность экспертной группы большей частью составляет примерно 5-7, максимально 10-15 человек при очных опросах.)

В данном случае мы исходим из объективного метода отбора экспертов. Исходя из специфики нашего исследования, он предусматривает подбор экспертов на основе должности, стажа работы в области, связанной с предметом исследования, участия в специализированных советах и комиссиях. Помимо этого, еще одним параметром отбора является территория его деятельности. Учитывая эти параметры, мы сформировали следующие выборочные совокупности.

Представители органов власти. В каждой области: орган власти субъекта федерации – 1 эксперт, муниципалитет столичного города – 1 эксперт, муниципалитет города, расположенного на территории области – 1 эксперт. Соответственно, общее количество экспертов от органов власти составит 12 человек.

Представители социально-ответственного бизнеса. По 3 эксперта в каждой области. Общее количество экспертов от бизнеса составит 12 человек.

Представители экспертного сообщества (члены Общественных Палат, представители ФСКН и наркологи). По 3 эксперта в каждой области. Общее количество экспертов – 12 человек.

Лидеры некоммерческих организаций. По 3 эксперта в каждой области. Общее количество экспертов – 12 человек.

Журналисты, специализирующиеся на социальной тематике. По 3 журналиста в каждой области. Общее количество экспертов – 12 человек.

Таким образом, общее количество экспертов составит 60 человек. (Ориентировочный список экспертов по каждой территории представлен в Приложении № 6.)

Контроль полевого этапа

Контроль экспертного опроса будет осуществляться супервайзерами, в функции которых входит:

1. выборочный обзвон экспертов, принявших участие в опросе

2. проверка заполненности бланка (проверяется каждый бланк),

3. контроль сроков проведения опроса,

4. контроль наличия аудиозаписей интервью экспертов.

Итогом работы супервайзеров являются проверенные, полностью заполненные бланки и аудиозаписи на 100% отражающие запланированный список экспертов и отчет контроля качества выполнения полевых работ.

Характеристика интервьюеров

Перед началом работы со всеми интервьюерами проводится инструктаж по бланку и пилотажные интервью, направленные на ознакомление интервьюеров с вопросником, выявление возможных проблемных мест в бланке и определения степени подготовленности интервьюеров к полевым работам. К работе будет допущен лишь тот, кто имеет опыт работы с экспертными интервью и владеет надежными базисными знаниями в области ведения коммуникации.

Каждый интервьюер получает комплект полевых документов: список экспертов; бланк интервью; визитные карточки СООО АНЦ «Спасение» с указанием ФИО интервьюера.

Эмпирическая интерпретация

Поскольку эксперты представляют основные институты, от которых зависит решение проблемы распространения наркотиков и профилактики наркозависимости, нам необходимо, в первую очередь, проанализировать структуру и сущность взаимодействия, существующего у них с НКО. Помимо этого, в зависимости от плотности и опыта контактов участников опроса с представителями различных некоммерческих организаций, мы можем получить комплексное представление экспертов о видении критериев результативности. Выше нами уже были проинтерпретировано содержание «взаимодействия» и «результативность». Исходя из этого, мы выделили следующие замеряемые параметры:

Программа № 3. «Получатели услуг»

Объект: получатели услуг НКО, работающих в сфере профилактики распространения наркотиков и реабилитации лиц, зависимых от потребления

География: реабилитационные центры, расположенные на территории Свердловской, Тюменской, Челябинской и Пермской областей.

Основные задачи Программы № 1.

Задачи состоят в получении мнения «изнутри», т.е. набора позиций, которые являются оценочными для получателей услуг НКО, обладающих непосредственным опытом взаимодействия с некоммерческими организациями.

Для решения этих задач нам необходимо выяснить мнение клиентов реабилитационных центров о качестве получаемых услуг, а также оценку реальных изменений, к которым привело получение данных услуг. Ниже (см. Эмпирическую интерпретацию) представлены параметры, через выяснение которых мы сможем получить необходимую для нас информацию.

Метод сбора информации

анкетирование

Выборка

Сплошная выборка, включает в себя всех (около 350 человек[5 - Точное количество респондентов будет конкретизировано в момент опроса и должно охватывать не менее 95% получателей услуг, проходящих реабилитацию в период исследования.]) получателей услуг реабилитационных центров на территории областей, входящих в географию проекта.

Методика реализации выборки

Разрабатывается отдельная анкета для проведения опроса респондентов.

Данные о численном составе получателей услуг запрашиваются у менеджеров реабилитационных центров. Через центры проводится сплошной опрос клиентов центров.

Контроль полевого этапа

В ходе опроса в каждом реабилитационном центре контроль полевого этапа будет осуществляться супервайзерами, в функции которых входит:

1. сбор информации о числе получателей услуг и видах предоставляемых услуг

2. проверка полноты заполняемых анкет (проверяется каждая анкета),

3. контроль сроков проведения опросов,

4. контроль выборки (проверка всех точек, попавших в опрос, и контроль списка респондентов для опроса получателей услуг)

Итогом работы супервайзеров являются проверенные, полностью заполненные анкеты, на 100% отражающие выборочную совокупность, и отчет контроля качества выполнения полевых работ.

Эмпирическая интерпретация

Выше мы уже отметили, что основное содержание деятельности НКО, занятых в данной сфере можно сгруппировать в два направления:

1.реабилитация (медицинская, психологическая, социальная) лиц, зависимых от потребления ПАВ и других химических веществ;

2.информирование (в т.ч. пропаганда здорового образа жизни, распространение информации о вреде потребления наркотиков и т.п.) о проблеме наркомании.

Соответственно, из этого мы и будем исходить в разработке эмпирических параметров.

Программа № 4. «Руководители НКО»

Объект: Менеджеры НКО, работающих в сфере противодействия распространению наркомании и реабилитации наркозависимых.

География: НКО, осуществляющие свою деятельность на территории Свердловской, Тюменской, Челябинской и Пермской областей.

Основные задачи Программы № 4.