Позитивные изменения, Том 3 №1, 2023. Positive changes. Volume 3, Issue 1 (2023)

Starting in 2019:

• Experts and government representatives can confirm or refute the relevance of the problems, notify about acute problems that could be addressed using the Foundation’s money and resources, during the project development phase and completing the application. Previously, they were also engaged in evaluating the applications received;

• only external experts in relation to the activities of the Foundation and the territories (experts in social design and in the subject areas of the Foundation’s activities) are involved in project evaluation. Previously, external experts (competition committee) were not involved in the competitive procedures;

• In 2019, the competition council was created for the first time, which consists of representatives of the donor, municipal government, and the Foundation. The council has the final say in selecting the competition winners.

The Foundation plans to increase the maturity of competitive procedures, which includes:

• expanding the functionality of the grantee’s personal account (with interim and final reporting, project monitoring functions).

• continuing the implementation of an evidence-based approach to social design for grantees (strengthening the logical coherence of projects, building the evidence base of the project, regulating the procedures for working with project team members).

ADVICE AND RECOMMENDATIONS

Based on the experience of The Road Home Foundation, a list of recommendations has been compiled to help improve similar competitions. These tips can be useful in the work of grantmaking organizations.

1. Enough time must be allocated for all stages of the competition: accepting applications, examining the applications, and publishing the results. It is better to announce the winners in advance than postpone the announcement.

2. All competitive procedures should be regulated[58]: Regulation on the competition, Regulation on the competition commission and competition council, cards with details on experts and applicants, detailed and updated methodological manuals for experts and applicants, instructions on working on the competition platform, consent to personal data processing, examples of filling out various sections of the application (including the project budget).

3. Conduct targeted work with future and current applicants: seminars and consultations on a wide range of issues related to project development, implementation, management, monitoring, evaluation, and completion; audits of winning and unsuccessful applications;

Open Days for grantmaking organizations and winning projects.

4. Increase the transparency of competitive procedures: preplanning an information campaign to promote the competition and its results, activities to engage grantees (at least 3 months prior to the start of the application process, or on an ongoing basis if the grant competition is held regularly), inform applicants about what projects are expected from applicants.

5. Monitor/evaluate the grant competition’s contribution to the grantmaker’s strategic objectives.

Исследования / Research Studies

Сила спорта. Оценка проектов в сфере физической культуры и массового спорта

Илья Солнцев, Наталья Кошелева

DOI 10.55140/2782–5817–2023–3–1–80–91

В 2020 г. Фонд Потанина начал реализацию благотворительной программы «Сила спорта», призванной раскрыть потенциал спорта как социального института. Одновременно с этим возникла необходимость в изучении мирового и российского опыта в оценке эффективности проектов, а также в формировании подходов к системе выбора перспективных направлений работы фонда. Для решения этих задач в 2022 г. Финансовый университет при Правительстве РФ провел исследование, направленное на выявление эффектов, достигаемых благодаря реализации проектов в области социального спорта, и обобщение подходов, используемых для их оценки.

Илья Солнцев

д. э. н., руководитель департамента менеджмента и маркетинга в спорте Финансового университета при Правительстве РФ

Наталья Кошелева

Консультант по мониторингу и оценке программ и проектов социальной направленности, президент Ассоциации специалистов по оценке программ и политик

СОЦИАЛЬНЫЕ ЭФФЕКТЫ СПОРТИВНЫХ ПРОЕКТОВ

Проекты, реализуемые в сфере физической культуры и массового спорта, решают целый комплекс задач, которые выходят за рамки категории «спорт»: целый ряд изменений происходит в экономике, образовании и профессиональной сфере, адаптации и социализации, демографии. Также спортивные проекты оказывают влияние на уровень преступности и заболеваемости, благополучие людей. Такой широкий спектр воздействия обусловил создание концепции «Спорт для развития» (Sport for Development), зародившейся ещё в середине прошлого века. Первым учёным, сформировавшим её теоретическую основу, был американский психолог Гордон Олпорт (Allport, 1954), который предположил, что контакты между различными группами людей с различными характеристиками, включая пол, этническую принадлежность и расу, являются наиболее эффективными средствами против расизма, предрассудков и дискриминации.

Основываясь на этой теоретической базе, Алексис Лирас (Lyras, 2011) предполагает, что спортивные инициативы могут способствовать личному развитию и социальным изменениям за счёт использования нетрадиционных методов управления и сочетания спорта с культурными и образовательными мероприятиями. Концепции «Спорт для развития» посвящено большое число аналитических порталов, например: Sport for Development[59] и Sport and Development[60], а также исследований таких глобальных организаций, как UNICEF[61] и ООН[62]. Направления влияния спорта на общество в целом могут быть обобщены через цели устойчивого развития ООН[63].

Эффекты, формируемые спортивными проектами, могут быть классифицированы на позитивные и негативные, а по направлениям воздействия – в разрезе социальной сферы, здоровья и экономики (Рисунок 1).

Рисунок 1. Эффекты, формируемые спортивными проектами

Источник: Благотворительный фонд Владимира Потанина. (2022). Социальный спорт: как измерить эффективность? Методы оценки эффективности социальных проектов в области спорта.

Положительные эффекты влияния спорта на социальную сферу и здоровье хорошо обобщены, и главное – количественно измерены в работе Ларисы Дэвис и др. (Davies et al., 2019):

1. Занятия спортом приводят к повышению уровня образования на 1 % (11–18 лет).

2. Выпускники, которые занимаются спортом в университете, зарабатывают в среднем на 18 % в год больше, чем те, кто этого не делает.

3. Занятия спортом приводят к снижению криминальных инцидентов на 1 % среди мужчин в возрасте 10–24 лет.

4. Занятия спортом связаны с более высоким субъективным благополучием.

5. Волонтёрство в спорте связано с улучшением индивидуального субъективного благополучия и большей удовлетворённостью жизнью. Время, потраченное волонтёрами, по стоимости эквивалентно среднему почасовому заработку.

6. Спортсмены на 14,1 % чаще сообщают о хорошем здоровье, чем те, кто не занимается спортом. Занятия спортом и физические упражнения умеренной интенсивности у взрослых, в том числе снижают риск:

• ишемической болезни сердца и инсульта у активных мужчин и женщин в среднем на 30 % (от 11 до 52 %);

• развития рака молочной железы у активных женщин на 20 % (от 10 до 30 %);

• развития рака толстой кишки на 24 %;

• развития сахарного диабета 2 типа на 10 %;

• развития деменции на 30 % (диапазон 21–52 %).

Широкий спектр воздействия спортивных проектов обусловил создание концепции «Спорт для развития». Впервые ее описал американский психолог Гордон Олпорт.

К похожим выводам пришли исследователи из Новой Зеландии[64]:

• 84 % опрошенных согласились с тем, что занятия спортом помогают привить такие важные жизненные навыки, как работа в команде и сотрудничество;

• для новозеландцев, которые занимаются спортом, уровень благополучия возрастает на 59 %;

• спорт помогает развить социальные навыки и найти новых друзей (в том числе для мигрантов);

• спорт высших достижений помогает привить чувство гордости за страну и вносит вклад в национальную идентичность;

• занятия физической культурой и спортом снижают риск сердечно-сосудистых заболеваний (7,9 %), диабета второго типа (9,8 %), деменции (7,7 %), рака груди (13,1 %), рака желудка (14,1 %);

• спорт и активный отдых ежегодно обеспечивают 53 тысячи рабочих мест и вклад в ВВП на сумму 4,9 млрд долл.

В части влияния спорта на экономику можно отметить опыт Европы[65]. Так, в 2012 году валовой внутренний продукт (ВВП), связанный со спортом, составил 279,7 млрд евро, или 2,12 % от общего ВВП в ЕС. Кроме того, к спорту можно отнести 5,67 млн работников, что составляет 2,72 %. Иными словами, каждый 47-й евро и каждый 37-й работник в ЕС были напрямую связаны со спортом. Данные цифры были получены с помощью таблиц «затраты-выпуск» для спорта, основанных на национальных вспомогательных (сателлитных) спортивных счетах (Sport Satellite Accounts).

Также в расчётах были использованы косвенные мультипликаторы, учитывающие, что каждый бизнес нуждается в сырье и материалах других секторов для производства своей продукции и/или услуг. Мультипликаторы показывают, сколько продукции других секторов необходимо для производства определённого товара. Например, для производства спортивного автомобиля требуются сиденья, для производства которых нужен текстиль и т. д. Величина мультипликаторов в первую очередь зависит от структуры экономических связей исходного сектора с остальными отраслями. Чем больше секторов взаимосвязано, тем выше множители. Применение множителей к прямым эффектам порождает косвенные эффекты. Если, например, футбольный стадион стоит 30 млн евро (прямой эффект), а строительный сектор сообщает о мультипликаторе 1,8, косвенный эффект будет равен (1,8–1,0) x 30, то есть 24 млн евро. Следует учитывать, что в цепочке поставок участвуют национальные предприятия, а также зарубежные страны, но первичные эффекты для страны зависят только от стоимости с поправкой на импорт.

В части экономических эффектов также нужно учитывать затраты занимающихся спортом на приобретение экипировки, оплату занятий в секциях, путешествия на соревнования (оплата билетов, питания, проживания). Кроме того, существенный эффект может быть сформирован за счёт роста коммерческих показателей (спонсорских поступлений) проектов, привлекающих существенную аудиторию.

Важным эффектом многих спортивных проектов является развитие территорий[66]:

• стимулирование деловой активности;

• создание местных рабочих мест (в том числе косвенно через строительные проекты);

• повышение привлекательности и положительное влияние на имидж территорий;

• вклад в инновации и развитие информационных и коммуникационных технологий (ИКТ) со спортивным содержанием;

• экономическая мобильность населения.

В контексте развития территорий следует отметить целый блок исследований, посвящённых оценке экономического эффекта, формируемого крупными спортивными соревнованиями: Елена Гуреева и Илья Солнцев (Гуреева, Солнцев, 2014), Роберт Бааде и Виктор Мэтисон (Baade & Matheson, 2004), Мишель де Ноойж и др. (de Nooij et al., 2013), Хольгер Пройсс (Preuss, 2007), Вольфганг Менниг и Эндрю Цимбалист (Maennig & Zimbalist, 2012).

В многочисленных исследованиях доказано, что спорт генерирует и негативные эффекты. Так, достаточно хорошо известно, что физическая активность может стимулировать употребление алкоголя (Lisha et al., 2011). Многие исследования указывают на более высокий уровень употребления алкоголя среди спортсменов по сравнению со сверстниками, не занимающимися лёгкой атлетикой (Leichliter et al., 1998). Распространённое объяснение заключается в том, что спортсмены празднуют свои победы (или переживают неудачи), а объединение в команды поощряет такое поведение (Leasure et al., 2015).

Также спорт может негативно сказываться на экологии, в том числе за счёт увеличения выбросов вредных веществ. Так, например, Памела Уикер (Wicker, 2019) опросила взрослых людей в Германии и попросила сообщить о своих поездках, связанных с занятиями спортом, включая поездки в контексте регулярных (еженедельных) занятий, спортивных соревнований/турниров, тренировочных сборов. Ежегодный углеродный след оценивался с использованием информации о расстояниях поездок и транспортных средствах. Результаты показали, что среднегодовой углеродный след составляет 844 кг выбросов в эквиваленте углекислого газа, при этом индивидуальные виды спорта обеспечивают больше выбросов, чем командные.

Эффекты, формируемые спортивными проектами, могут быть классифицированы на позитивные и негативные, а по направлениям воздействия – в разрезе социальной сферы, здоровья и экономики.

Ещё один негативный эффект – это агрессия, оскорбительное поведение и насилие в отношении участников соревнований и судей. В качестве примера можно привести инцидент, когда бывший капитан сборной России по футболу Роман Широков избил арбитра Никиту Данченкова во время любительского турнира «Московский кубок селебрити»[67]. Питер Доусон и др. (Dawson et al., 2022) изучали влияние жестокого обращения на решение официальных лиц матча покинуть свою работу. На основе опросов футбольных судей во Франции и Нидерландах авторы исследовали факторы, связанные со словесными и физическими оскорблениями в адрес судей, а также связь этих оскорблений с намерениями судей уйти из профессии.

В части влияния спорта на отношения внутри семьи также отмечаются и негативные эффекты. В частности, исследователи выделяют высокие расходы семей на занятия спортом (Kay, 2000; Dixon et al., 2008). Помимо финансовых обязательств, растут и временные затраты. Тесс Кей (Kay, 2000) отмечает, что потребность в занятиях спортом влияет на распорядок дня и вызывает изменения в планах отпусков и графике работы. Негативные последствия могут включать усиление стресса и беспокойства (O’Rourke et al., 2011), а также снижение самооценки и травмы (Kay, 2000). Также отмечается чувство ревности и обиды или нехватка времени для других занятий (Côté, 1999). Тесс Кей (Кay, 2000) обнаружила, что некоторые дети, которые не участвовали в соревнованиях, испытывали зависть к братьям и сёстрам, которые занимались спортом, и чувствовали, что их отношения с родителями были не такими крепкими. Наконец, было показано, что родители становятся менее активны в результате участия в спорте своих детей (Dixon, 2009).

Для оценки эффективности отдельных проектов в сфере спорта может применяться несколько подходов, включая экспертную оценку, проектную оценку (и мониторинг) и монетарную оценку.

По данным UEFA[68], к негативным эффектам социального спорта могут быть отнесены спортивные травмы, употребление допинга, коррупция и влияние беттинга (ставки в букмекерской конторе).

ОЦЕНКА ЭФФЕКТИВНОСТИ ПРОЕКТОВ

Для оценки эффективности отдельных проектов, в которых физкультура и спорт используются для достижения социальных и экономических эффектов, может применяться несколько подходов, включая экспертную оценку, проектную оценку (и мониторинг) и монетарную оценку, например оценку социального возврата на инвестиции (SROI – Social Return on Investment). Сходства и различия между этими подходами мы рассмотрим на примере проекта «Девушки на футбольном поле». Проект был реализовал в 2016 году в Турции. Для него была проведена оценка социального возврата на инвестиции, а соответствующий отчет прошел сертификацию Social Value, международной сети, которая продвигает подход SROI[69].

ОПИСАНИЕ ПРОЕКТА «ДЕВУШКИ НА ФУТБОЛЬНОМ ПОЛЕ»

Проект «Девушки на футбольном поле» был создан Мелис Абажи-оглу и ее компанией Actifit в 2013 году. За год до этого Мелис с подругами организовали футбольный матч для женщин после того, как их друзья-мужчины отказались играть вместе с ними.

Проект предусматривает создание футбольной академии – в течение пяти дней девочки участвуют в футбольных тренировках, а также творческих мастер-классах по изобразительному и театральному искусству и развитию креативности. Кроме того, для родителей участниц академии, которых приглашали присутствовать на тренировках дочерей, была проведена лекция по гендерному равенству.

Цели проекта:

• Посредством футбола повысить информированность о гендерном равенстве и способствовать более активному участию девочек в занятиях спортом;

• Повысить творческий потенциал девочек посредством креативных мастер-классов.

ОЦЕНКА СОЦИАЛЬНОГО ВОЗВРАТА НА ИНВЕСТИЦИИ

Оценка началась с анализа заинтересованных сторон. Были выделены следующие группы: девочки-участницы академии, их родители, тренеры-волонтеры, компания Actifit, которая реализовала проект, доноры, поддержавшие проект финансово, фонд, который провел презентацию по вопросам гендерного равенства для родителей девочек.

Следующий этап оценки – сбор данных, который был проведен сразу после окончания работы академии. Основным инструментом сбора данных был опрос. Анкеты, разработанные для каждой группы заинтересованных сторон, включали открытые вопросы, касающиеся как участия в различных мероприятиях в рамках проекта, так и полученных результатов, например: «Что вам дало участие в проекте? Что изменилось в вашей жизни в результате этого проекта? Были ли какие-то негативные последствия вашего участия в проекте?».

На основании собранных данных для всех групп заинтересованных сторон был определен их вклад в реализацию проекта. Например, вкладом девочек, их родителей и тренеров-волонтеров было время, вкладом доноров – деньги и спортивный инвентарь.

Кроме того, на основании анализа ответов в анкетах были определены полученные позитивные и негативные результаты, а также связь между мероприятиями проекта и результатами. Стоит отметить, что в рамках данного анализа результаты делились на ожидаемые (запланированные) и незапланированные. Например, для девочек проект позволил получить три вида результатов. Во-первых, они стали более уверенными в себе и убедились в возможности гендерного равенства. Согласно анализу автора отчета, к первому результату привела следующая цепочка изменений: благодаря футбольным тренировкам девочки поняли, что футбол – игра не только для мальчиков, как они считали раньше, плюс занятия футболом позволили им оценить положительные эффекты спорта, что придало им уверенности в себе и сформировало понимание возможностей гендерного равенства. Во-вторых, у девочек развились воображение и творческие способности. В-третьих, девочкам стало проще общаться с друзьями и родителями. Последний результат назван авторами отчета незапланированным, так как он не упомянут в целях проекта.

Успешная работа футбольной академии в Эскишехире стала кейсом, который компания Actifit может использовать для дальнейшего продвижения своей программы «Девушки на футбольном поле».

Результатами проекта для родителей стали повышение информированности о гендерной дискриминации и улучшение взаимопонимания с дочерями, родители стали больше общаться с ними. Тренеры-волонтеры благодаря участию в проекте развили навыки коммуникации, получили тренерский опыт и отметили успехи в личностном росте.

Компания Actifit, которая занималась подготовкой и реализацией проекта, сумела привлечь к нему доноров, партнеров и волонтеров. Поэтому одним из положительных результатов проекта для компании стала экономия собственных финансовых ресурсов и труда сотрудников. Кроме того, компании удалось сделать проект более устойчивым. А успешная работа футбольной академии в Эскишехире стала кейсом, который компания Actifit может использовать для дальнейшего продвижения своей программы «Девушки на футбольном поле». Также выросла мотивация сотрудников, связанная с участием в этой программе. Негативным результатом программы стало то, что три сотрудника компании потратили на работу в проекте 28 дней своего рабочего времени.

Следующим этапом стала монетизация вкладов в проект, сделанных заинтересованными сторонами, и полученных ими результатов. При монетарной оценке вкладов были учтены только финансовые вложения компании Actifit и доноров, а также стоимость предоставленного ими инвентаря. Авторы отчета решили не давать монетарную оценку времени, затраченного на участие в проекте детьми, родителями и тренерами-волонтерами.

При монетарной оценке результатов авторы использовали данные о стоимости платных услуг, которые могли бы позволить участникам проекта получить аналогичные результаты. Например, в Эскишехире есть платная секция футбола. Было сделано допущение, что неделя занятий в платной секции футбола дала бы девочкам такой же результат в плане развития уверенности в себе и понимания возможности гендерного равенства, поэтому стоимость этой недели использовали в качестве «прокси» в оценке стоимости результата.

Вне проекта родители могли бы научиться лучше понимать дочерей и больше общаться с ними, если бы прошли курс занятий с семейным психологом, поэтому стоимость такого курса стала монетарной оценкой для этого результата. Так как на платной основе лекций по гендерному неравенству в Эскишехире никто не читает, любопытно, что повышение информированности родителей о гендерной дискриминации получило нулевую монетарную оценку.

На основании полученных монетарных оценок был проведен уже сам расчет социального возврата на инвестиции, причем как для проекта в целом, так и для каждой группы заинтересованных сторон. Общий показатель SROI для проекта составил 12,45 – то есть на одну турецкую лиру, вложенную в реализацию проекта, получено 12,45 лиры социального эффекта. При этом из этих 12,45 лиры на долю результатов, полученных девочками, приходится 20 % (2,43 лиры), а на долю результатов, полученных родителями, – 38 % (4,68 лиры).

ПРОЕКТНАЯ ОЦЕНКА

В английском языке есть несколько слов-синонимов, которые переводятся на русский как оценка. Проектную оценку мы приравниваем к английскому evaluation. Эта оценка представляет собой комплекс аналитических мероприятий, которые проводятся, чтобы обеспечить лиц, принимающих управленческие решения относительно проекта, необходимой им информацией. Обычно такие решения принимают либо руководители проекта, либо его доноры.

Данный подход предполагает, что еще на этапе планирования проекта будет разработана система его мониторинга и оценки. Основой для разработки такой системы служат результаты анализа заинтересованных сторон и описания механизма работы проекта, которое объясняет, каким образом реализация проектных мероприятий приведет к достижению ожидаемых результатов (такое описание принято называть теорией изменений или логической моделью проекта).

Соответственно, при использовании этого подхода анализ заинтересованных сторон проекта «Девушки на футбольном поле» нужно было бы провести еще на этапе его планирования. После этого нужно было бы построить карту изменений или логическую модель, которая бы объясняла, каким образом мероприятия проекта приведут в итоге к достижению его целей. Построение такой карты могло бы также помочь конкретизировать цели (конечные ожидаемые результаты) проекта. Например, одна из целей сформулирована следующим образом: «Посредством футбола повысить информированность о гендерном равенстве и способствовать более активному участию девочек в занятиях спортом». При разработке карты изменений нужно было бы решить, какая цепочка изменений связывает презентацию по вопросам гендерного равенства для родителей девочек с этой целью: например, более информированные родители поддержат желание дочерей заниматься спортом. На этом этапе могло быть принято решение, что результаты презентации для родителей лучше вынести в отдельную цепочку изменений и добавить еще одну цель проекта.

На основании карты ожидаемых изменений определяют, какая информация потребуется для отслеживания процесса реализации проекта и достижения его результатов. Следующий шаг – решить, кто, когда и как будет эту информацию собирать, анализировать и использовать.

Ключевая задача оценки – помочь руководителям проекта понять, действительно ли реализуется задуманный механизм достижения изменений. Для управления процессом изменений очень важно знать, где в этом процессе происходят сбои. Соответственно, система мониторинга и оценки строится так, чтобы эти сбои выявлять. Кроме того, в проектном управлении сейчас уделяется много внимания незапланированным результатам, как позитивным, так и негативным. Поэтому сбор данных при проектной оценке мог бы быть примерно таким же, как и при описанной выше оценке социального возврата на инвестиции. Но при анализе был бы четкий фокус на то, насколько достигаются запланированные результаты, и какие из незапланированных результатов являются положительными и отрицательными.