Позитивные измененияСпорт

Сила спорта. Оценка проектов в сфере физической культуры и массового спорта

В 2020 г. Фонд Потанина начал реализацию благотворительной программы «Сила спорта», призванной раскрыть потенциал спорта как социального института. Одновременно с этим возникла необходимость в изучении мирового и российского опыта в оценке эффективности проектов, а также в формировании подходов к системе выбора перспективных направлений работы фонда. Для решения этих задач в 2022 г. Финансовый университет при Правительстве РФ провел исследование, направленное на выявление эффектов, достигаемых благодаря реализации проектов в области социального спорта, и обобщение подходов, используемых для их оценки.

Социальные эффекты спортивных проектов

Проекты, реализуемые в сфере физической культуры и массового спорта, решают целый комплекс задач, которые выходят за рамки категории «спорт»: целый ряд изменений происходит в экономике, образовании и профессиональной сфере, адаптации и социализации, демографии. Также спортивные проекты оказывают влияние на уровень преступности и заболеваемости, благополучие людей. Такой широкий спектр воздействия обусловил создание концепции «Спорт для развития» (Sport for Development), зародившейся ещё в середине прошлого века. Первым учёным, сформировавшим её теоретическую основу, был американский психолог Гордон Олпорт (Allport, 1954), который предположил, что контакты между различными группами людей с различными характеристиками, включая пол, этническую принадлежность и расу, являются наиболее эффективными средствами против расизма, предрассудков и дискриминации.

Основываясь на этой теоретической базе, Алексис Лирас (Lyras, 2011) предполагает, что спортивные инициативы могут способствовать личному развитию и социальным изменениям за счёт использования нетрадиционных методов управления и сочетания спорта с культурными и образовательными мероприятиями. Концепции «Спорт для развития» посвящено большое число аналитических порталов, например: Sport for Development¹ и Sport and Development², а также исследований таких глобальных организаций, как UNICEF³ и ООН⁴. Направления влияния спорта на общество в целом могут быть обобщены через цели устойчивого развития ООН⁵.

1. Sport for Development. (2023). Retrieved from: https://www.sport-for-development.com/ home. (accessed 30.01.2023).

2. Sportanddev.org. (2023). Retrieved from: https://www.sportanddev.org/en. (accessed 30.01.2023).

3. UNICEF. (2019). Getting into the Game. Understanding the evidence for child-focused sport for development. Retrieved from: https://www.unicef-irc.org/getting-into-the-game. (accessed 30.01.2023).

4. United Nations. (2003). Sport for development and peace: Towards achieving the millennium development goals. Report from the United Nations Inter-Agency Task. Force on Sport for Development and Peace. Retrieved from: https://www.sportanddev.org/ sites/default/files/downloads/16__sport_for_dev_towards_millenium_goals.pdf. (accessed 30.01.2023). https://doi.org/10.18356/b7ee7a39-en.

5. Sportanddev.org. (2019). Measuring the contribution of sport, physical education and physical activity to the Sustainable Development Goals. Retrieved from: https://www. sportanddev.org/en/toolkit/sport-and-development-policy/policy-monitoring-andevaluation. (accessed 30.01.2023).

Эффекты, формируемые спортивными проектами, могут быть классифицированы на позитивные и негативные, а по направлениям воздействия — в разрезе социальной сферы, здоровья и экономики (Рисунок 1).

Положительные эффекты влияния спорта на социальную сферу и здоровье хорошо обобщены, и главное — количественно измерены в работе Ларисы Дэвис и др. (Davies et al., 2019):

1. Занятия спортом приводят к повышению уровня образования на 1% (11–18 лет).

2. Выпускники, которые занимаются спортом в университете, зарабатывают в среднем на 18% в год больше, чем те, кто этого не делает.

3. Занятия спортом приводят к снижению криминальных инцидентов на 1% среди мужчин в возрасте 10–24 лет.

4. Занятия спортом связаны с более высоким субъективным благополучием.

5. Волонтёрство в спорте связано с улучшением индивидуального субъективного благополучия и большей удовлетворённостью жизнью. Время, потраченное волонтёрами, по стоимости эквивалентно среднему почасовому заработку. 6. Спортсмены на 14,1% чаще сообщают о хорошем здоровье, чем те, кто не занимается спортом. Занятия спортом и физические упражнения умеренной интенсивности у взрослых, в том числе снижают риск:

• ишемической болезни сердца и инсульта у активных мужчин и женщин в среднем на 30% (от 11 до 52%);
• развития рака молочной железы у активных женщин на 20% (от 10 до 30%);
• развития рака толстой кишки на 24%;
• развития сахарного диабета 2 типа на 10%;
• развития деменции на 30% (диапазон 21–52%).

К похожим выводам пришли исследователи из Новой Зеландии⁶:

6. Sport New Zealand. (2023). The value of sport. Retrieved from: https://sportnz.org.nz/ resources/the-value-of-sport/. (accessed 30.01.2023).

• 84% опрошенных согласились с тем, что занятия спортом помогают привить такие важные жизненные навыки, как работа в команде и сотрудничество;
• для новозеландцев, которые занимаются спортом, уровень благополучия возрастает на 59%;
• спорт помогает развить социальные навыки и найти новых друзей (в том числе для мигрантов);
• спорт высших достижений помогает привить чувство гордости за страну и вносит вклад в национальную идентичность;
• занятия физической культурой и спортом снижают риск сердечно-сосудистых заболеваний (7,9%), диабета второго типа (9,8%), деменции (7,7%), рака груди (13,1%), рака желудка (14,1%);
• спорт и активный отдых ежегодно обеспечивают 53 тысячи рабочих мест и вклад в ВВП на сумму 4,9 млрд долл.

В части влияния спорта на экономику можно отметить опыт Европы⁷. Так, в 2012 году валовой внутренний продукт (ВВП), связанный со спортом, составил 279,7 млрд евро, или 2,12% от общего ВВП в ЕС. Кроме того, к спорту можно отнести 5,67 млн работников, что составляет 2,72%. Иными словами, каждый 47-й евро и каждый 37-й работник в ЕС были напрямую связаны со спортом. Данные цифры были получены с помощью таблиц «затраты-выпуск» для спорта, основанных на национальных вспомогательных (сателлитных) спортивных счетах (Sport Satellite Accounts).

7. European Commission. (2012). Study on the Contribution of Sport to Economic Growth and Employment in the EU. Retrieved from: https://ec.europa.eu/assets/eac/sport/library/ studies/study-contribution-spors-economic-growth-final-rpt.pdf. (accessed 30.01.2023).

Также в расчётах были использованы косвенные мультипликаторы, учитывающие, что каждый бизнес нуждается в сырье и материалах других секторов для производства своей продукции и/или услуг. Мультипликаторы показывают, сколько продукции других секторов необходимо для производства определённого товара. Например, для производства спортивного автомобиля требуются сиденья, для производства которых нужен текстиль и т. д. Величина мультипликаторов в первую очередь зависит от структуры экономических связей исходного сектора с остальными отраслями. Чем больше секторов взаимосвязано, тем выше множители. Применение множителей к прямым эффектам порождает косвенные эффекты. Если, например, футбольный стадион стоит 30 млн евро (прямой эффект), а строительный сектор сообщает о мультипликаторе 1,8, косвенный эффект будет равен (1,8 – 1,0) x 30, то есть 24 млн евро. Следует учитывать, что в цепочке поставок участвуют национальные предприятия, а также зарубежные страны, но первичные эффекты для страны зависят только от стоимости с поправкой на импорт.

В части экономических эффектов также нужно учитывать затраты занимающихся спортом на приобретение экипировки, оплату занятий в секциях, путешествия на соревнования (оплата билетов, питания, проживания). Кроме того, существенный эффект может быть сформирован за счёт роста коммерческих показателей (спонсорских поступлений) проектов, привлекающих существенную аудиторию.

Важным эффектом многих спортивных проектов является развитие территорий⁸:

8. European Commission. (2020). Contribution of sport to regional development through Cohesion Policy 2021–2027. SHARE initiative research paper. Retrieved from: https://keanet.eu/wp-content/uploads/SHARE-The-contribution-of-sport-to-regionaldevelopment-through-CP-2021-2027-FINAL.pdf. (accessed 30.01.2023).

• стимулирование деловой активности;
• создание местных рабочих мест (в том числе косвенно через строительные проекты);
• повышение привлекательности и положительное влияние на имидж территорий;
• вклад в инновации и развитие информационных и коммуникационных технологий (ИКТ) со спортивным содержанием;
• экономическая мобильность населения.

В контексте развития территорий следует отметить целый блок исследований, посвящённых оценке экономического эффекта, формируемого крупными спортивными соревнованиями: Елена Гуреева и Илья Солнцев (Гуреева, Солнцев, 2014), Роберт Бааде и Виктор Мэтисон (Baade & Matheson, 2004), Мишель де Ноойж и др. (de Nooij et al., 2013), Хольгер Пройсс (Preuss, 2007), Вольфганг Менниг и Эндрю Цимбалист (Maennig & Zimbalist, 2012).

В многочисленных исследованиях доказано, что спорт генерирует и негативные эффекты. Так, достаточно хорошо известно, что физическая активность может стимулировать употребление алкоголя (Lisha et al., 2011). Многие исследования указывают на более высокий уровень употребления алкоголя среди спортсменов по сравнению со сверстниками, не занимающимися лёгкой атлетикой (Leichliter et al., 1998). Распространённое объяснение заключается в том, что спортсмены празднуют свои победы (или переживают неудачи), а объединение в команды поощряет такое поведение (Leasure et al., 2015).

Также спорт может негативно сказываться на экологии, в том числе за счёт увеличения выбросов вредных веществ. Так, например, Памела Уикер (Wicker, 2019) опросила взрослых людей в Германии и попросила сообщить о своих поездках, связанных с занятиями спортом, включая поездки в контексте регулярных (еженедельных) занятий, спортивных соревнований/турниров, тренировочных сборов. Ежегодный углеродный след оценивался с использованием информации о расстояниях поездок и транспортных средствах. Результаты показали, что среднегодовой углеродный след составляет 844 кг выбросов в эквиваленте углекислого газа, при этом индивидуальные виды спорта обеспечивают больше выбросов, чем командные.

Ещё один негативный эффект — это агрессия, оскорбительное поведение и насилие в отношении участников соревнований и судей. В качестве примера можно привести инцидент, когда бывший капитан сборной России по футболу Роман Широков избил арбитра Никиту Данченкова во время любительского турнира «Московский кубок селебрити»⁹. Питер Доусон и др. (Dawson et al., 2022) изучали влияние жестокого обращения на решение официальных лиц матча покинуть свою работу. На основе опросов футбольных судей во Франции и Нидерландах авторы исследовали факторы, связанные со словесными и физическими оскорблениями в адрес судей, а также связь этих оскорблений с намерениями судей уйти из профессии.

9. Арманд, Н. (2020). Суд приговорил Романа Широкова к обязательным работам за избиение судьи. Режим доступа: https://sportrbc.ru/ news/5fe5d56a9a7947e4123b977e. 25.12.2020. (дата доступа: 30.01.2023).

В части влияния спорта на отношения внутри семьи также отмечаются и негативные эффекты. В частности, исследователи выделяют высокие расходы семей на занятия спортом (Kay, 2000; Dixon et al., 2008). Помимо финансовых обязательств, растут и временные затраты. Тесс Кей (Kay, 2000) отмечает, что потребность в занятиях спортом влияет на распорядок дня и вызывает изменения в планах отпусков и графике работы. Негативные последствия могут включать усиление стресса и беспокойства (O’Rourke et al., 2011), а также снижение самооценки и травмы (Kay, 2000). Также отмечается чувство ревности и обиды или нехватка времени для других занятий (Côté, 1999). Тесс Кей (Кay, 2000) обнаружила, что некоторые дети, которые не участвовали в соревнованиях, испытывали зависть к братьям и сёстрам, которые занимались спортом, и чувствовали, что их отношения с родителями были не такими крепкими. Наконец, было показано, что родители становятся менее активны в результате участия в спорте своих детей (Dixon, 2009).

По данным UEFA¹⁰, к негативным эффектам социального спорта могут быть отнесены спортивные травмы, употребление допинга, коррупция и влияние беттинга (ставки в букмекерской конторе).

10. UEFA. (2019). The UEFA Grow SROI Model: Valuing the Impact of Football Participation in Europe. Retrieved from: https://www.knvb.nl/downloads/bestand/26276/uefa-sroi-finalreport. (accessed 30.01.2023)

Оценка эффективности проектов

Для оценки эффективности отдельных проектов, в которых физкультура и спорт используются для достижения социальных и экономических эффектов, может применяться несколько подходов, включая экспертную оценку, проектную оценку (и мониторинг) и монетарную оценку, например оценку социального возврата на инвестиции (SROI — Social Return on Investment). Сходства и различия между этими подходами мы рассмотрим на примере проекта «Девушки на футбольном поле». Проект был реализовал в 2016 году в Турции. Для него была проведена оценка социального возврата на инвестиции, а соответствующий отчет прошел сертификацию Social Value, международной сети, которая продвигает подход SROI¹¹.

11. Social Value UK. (2023). Retrieved from: https://socialvalueuk.org/. (accessed 30.01.2023).

Описание проекта «Девушки на футбольном поле»

Проект «Девушки на футбольном поле» был создан Мелис Абажиоглу и ее компанией Actifit в 2013 году. За год до этого Мелис с подругами организовали футбольный матч для женщин после того, как их друзья-мужчины отказались играть вместе с ними.

Проект предусматривает создание футбольной академии — в течение пяти дней девочки участвуют в футбольных тренировках, а также творческих мастер-классах по изобразительному и театральному искусству и развитию креативности. Кроме того, для родителей участниц академии, которых приглашали присутствовать на тренировках дочерей, была проведена лекция по гендерному равенству.

Цели проекта:

• Посредством футбола повысить информированность о гендерном равенстве и способствовать более активному участию девочек в занятиях спортом;
• Повысить творческий потенциал девочек посредством креативных мастер-классов.

Оценка социального возврата на инвестиции

Оценка началась с анализа заинтересованных сторон. Были выделены следующие группы: девочки-участницы академии, их родители, тренеры-волонтеры, компания Actifit, которая реализовала проект, доноры, поддержавшие проект финансово, фонд, который провел презентацию по вопросам гендерного равенства для родителей девочек.

Следующий этап оценки — сбор данных, который был проведен сразу после окончания работы академии. Основным инструментом сбора данных был опрос. Анкеты, разработанные для каждой группы заинтересованных сторон, включали открытые вопросы, касающиеся как участия в различных мероприятиях в рамках проекта, так и полученных результатов, например: «Что вам дало участие в проекте? Что изменилось в вашей жизни в результате этого проекта? Были ли какие-то негативные последствия вашего участия в проекте?».

На основании собранных данных для всех групп заинтересованных сторон был определен их вклад в реализацию проекта. Например, вкладом девочек, их родителей и тренеров-волонтеров было время, вкладом доноров — деньги и спортивный инвентарь.

Кроме того, на основании анализа ответов в анкетах были определены полученные позитивные и негативные результаты, а также связь между мероприятиями проекта и результатами. Стоит отметить, что в рамках данного анализа результаты делились на ожидаемые (запланированные) и незапланированные. Например, для девочек проект позволил получить три вида результатов. Во-первых, они стали более уверенными в себе и убедились в возможности гендерного равенства. Согласно анализу автора отчета, к первому результату привела следующая цепочка изменений: благодаря футбольным тренировкам девочки поняли, что футбол — игра не только для мальчиков, как они считали раньше, плюс занятия футболом позволили им оценить положительные эффекты спорта, что придало им уверенности в себе и сформировало понимание возможностей гендерного равенства. Во-вторых, у девочек развились воображение и творческие способности. В-третьих, девочкам стало проще общаться с друзьями и родителями. Последний результат назван авторами отчета незапланированным, так как он не упомянут в целях проекта.

Результатами проекта для родителей стали повышение информированности о гендерной дискриминации и улучшение взаимопонимания с дочерями, родители стали больше общаться с ними. Тренеры-волонтеры благодаря участию в проекте развили навыки коммуникации, получили тренерский опыт и отметили успехи в личностном росте.

Компания Actifit, которая занималась подготовкой и реализацией проекта, сумела привлечь к нему доноров, партнеров и волонтеров. Поэтому одним из положительных результатов проекта для компании стала экономия собственных финансовых ресурсов и труда сотрудников. Кроме того, компании удалось сделать проект более устойчивым. А успешная работа футбольной академии в Эскишехире стала кейсом, который компания Actifit может использовать для дальнейшего продвижения своей программы «Девушки на футбольном поле». Также выросла мотивация сотрудников, связанная с участием в этой программе. Негативным результатом программы стало то, что три сотрудника компании потратили на работу в проекте 28 дней своего рабочего времени.

Следующим этапом стала монетизация вкладов в проект, сделанных заинтересованными сторонами, и полученных ими результатов. При монетарной оценке вкладов были учтены только финансовые вложения компании Actifit и доноров, а также стоимость предоставленного ими инвентаря. Авторы отчета решили не давать монетарную оценку времени, затраченного на участие в проекте детьми, родителями и тренерами-волонтерами.

При монетарной оценке результатов авторы использовали данные о стоимости платных услуг, которые могли бы позволить участникам проекта получить аналогичные результаты. Например, в Эскишехире есть платная секция футбола. Было сделано допущение, что неделя занятий в платной секции футбола дала бы девочкам такой же результат в плане развития уверенности в себе и понимания возможности гендерного равенства, поэтому стоимость этой недели использовали в качестве «прокси» в оценке стоимости результата.

Вне проекта родители могли бы научиться лучше понимать дочерей и больше общаться с ними, если бы прошли курс занятий с семейным психологом, поэтому стоимость такого курса стала монетарной оценкой для этого результата. Так как на платной основе лекций по гендерному неравенству в Эскишехире никто не читает, любопытно, что повышение информированности родителей о гендерной дискриминации получило нулевую монетарную оценку.

На основании полученных монетарных оценок был проведен уже сам расчет социального возврата на инвестиции, причем как для проекта в целом, так и для каждой группы заинтересованных сторон. Общий показатель SROI для проекта составил 12,45 — то есть на одну турецкую лиру, вложенную в реализацию проекта, получено 12,45 лиры социального эффекта. При этом из этих 12,45 лиры на долю результатов, полученных девочками, приходится 20% (2,43 лиры), а на долю результатов, полученных родителями, — 38% (4,68 лиры).

Проектная оценка

В английском языке есть несколько слов-синонимов, которые переводятся на русский как оценка. Проектную оценку мы приравниваем к английскому evaluation. Эта оценка представляет собой комплекс аналитических мероприятий, которые проводятся, чтобы обеспечить лиц, принимающих управленческие решения относительно проекта, необходимой им информацией. Обычно такие решения принимают либо руководители проекта, либо его доноры.

Данный подход предполагает, что еще на этапе планирования проекта будет разработана система его мониторинга и оценки. Основой для разработки такой системы служат результаты анализа заинтересованных сторон и описания механизма работы проекта, которое объясняет, каким образом реализация проектных мероприятий приведет к достижению ожидаемых результатов (такое описание принято называть теорией изменений или логической моделью проекта).

Соответственно, при использовании этого подхода анализ заинтересованных сторон проекта «Девушки на футбольном поле» нужно было бы провести еще на этапе его планирования. После этого нужно было бы построить карту изменений или логическую модель, которая бы объясняла, каким образом мероприятия проекта приведут в итоге к достижению его целей. Построение такой карты могло бы также помочь конкретизировать цели (конечные ожидаемые результаты) проекта. Например, одна из целей сформулирована следующим образом: «Посредством футбола повысить информированность о гендерном равенстве и способствовать более активному участию девочек в занятиях спортом». При разработке карты изменений нужно было бы решить, какая цепочка изменений связывает презентацию по вопросам гендерного равенства для родителей девочек с этой целью: например, более информированные родители поддержат желание дочерей заниматься спортом. На этом этапе могло быть принято решение, что результаты презентации для родителей лучше вынести в отдельную цепочку изменений и добавить еще одну цель проекта.

На основании карты ожидаемых изменений определяют, какая информация потребуется для отслеживания процесса реализации проекта и достижения его результатов. Следующий шаг — решить, кто, когда и как будет эту информацию собирать, анализировать и использовать.

Ключевая задача оценки — помочь руководителям проекта понять, действительно ли реализуется задуманный механизм достижения изменений. Для управления процессом изменений очень важно знать, где в этом процессе происходят сбои. Соответственно, система мониторинга и оценки строится так, чтобы эти сбои выявлять. Кроме того, в проектном управлении сейчас уделяется много внимания незапланированным результатам, как позитивным, так и негативным. Поэтому сбор данных при проектной оценке мог бы быть примерно таким же, как и при описанной выше оценке социального возврата на инвестиции. Но при анализе был бы четкий фокус на то, насколько достигаются запланированные результаты, и какие из незапланированных результатов являются положительными и отрицательными.

Нужно отметить, что расчет SROI или другая монетарная оценка могут быть частью проектной оценки, если эта информация нужна лицам, принимающим решения.

Экспертная оценка

Экспертную оценку используют обычно тогда, когда социальные результаты проекта по каким-то причинам нельзя измерить. Чаще всего ее применяют организации-доноры для оценки проектных заявок. Оценка — это суждение о ценности проекта, о том, насколько он хорош. При проведении экспертной оценки ее заказчик формирует список критериев — характеристик, которыми должен обладать проект, а эксперты на основании описания проекта в заявке и своих знаний и опыта должны ответить, в какой мере проект соответствует этим критериям. Например, если бы доноры проекта «Девушки на футбольном поле» принимали решение о его финансировании на основании экспертной оценки, они могли бы использовать такие критерии, как соответствие проекта стратегии, результативность проекта — насколько проект способен достичь ожидаемых результатов, экономическая целесообразность проекта — использует ли проект самый дешевый способ достижения ожидаемых результатов или есть более экономичные варианты.

Так как достижение ожидаемых результатов — это главное, чего ждут от проекта, то экспертная оценка может фокусироваться на подробном анализе ожидаемых цепочек изменений. В этом случае экспертам предъявляют подробную карту изменений, составленную разработчиками проекта, и просят оценить вероятность всех связок между результатами, чтобы определить, где возможны разрывы.

• Например, при планировании проекта «Девушки на футбольном поле» его авторы могли запланировать следующую цепочку изменений:
• Девочки, которые до начала проекта считают, что футбол — это игра только для мальчиков, проходят полный курс тренировок в академии (пять дней по три часа в день);
• В результате они успешно овладевают базовыми навыками игры;
• Девочки успешно применяют полученные навыки в тренировочных играх;
• Девочки получают удовлетворение и удовольствие от игры;
• Девочки понимают, что идея о том, что только мальчики способны играть в футбол, была ложной;
• Избавление от одного из гендерных стереотипов помогает девочками убедиться в возможности гендерного равенства.

В ходе оценки экспертам нужно будет оценить вероятность того, что достижение очередного результата в этой цепочке обеспечит реализацию следующего шага. Например, если девочки пройдут полный курс тренировок в академии (15 часов), какова вероятность того, что они овладеют базовыми навыками игры?

Заключение

Мировой опыт показывает, что проекты, реализуемые в сфере физической культуры и массового спорта, могут создавать как значимые позитивные социальные изменения, так и негативные эффекты. Важным результатом проведенного исследования стала систематизация данных эффектов, что поможет организациям, реализующим и поддерживающим проекты в сфере социального спорта, в их идентификации и оценке. Использование различных видов оценки позволяет выявлять и измерять создаваемые изменения на всех стадиях реализации проекта, что, в свою очередь, помогает лучше управлять процессом изменений. Кроме того, оценка важна для обоснования объемов финансирования и выбора направлений стратегического развития, что особенно актуально в современных условиях, когда все социальные инициативы уже не могут рассчитывать на прежний уровень поддержки из бюджетных и внебюджетных источников.

Илья Солнцев, д. э. н., руководитель департамента менеджмента и маркетинга в спорте Финансового университета при Правительстве РФ

Наталья Кошелева, консультант по мониторингу и оценке программ и проектов социальной направленности, президент Ассоциации специалистов по оценке программ и политик

The Power of Sport. Evaluation of Projects in the Field of Physical Culture and Grassroots Sport

In 2020, the Vladimir Potanin Foundation launched the “Power of Sport,” a charitable initiative aimed at uncovering the potential of sports as a social institution. In preparing the launch of the program, the Foundation experts had to study the experience of evaluating project effectiveness, in both an international and Russian context — as well as develop approaches to the selection of promising development areas, including identification and evaluation of effects. To address these problems, the Financial University under the Government of the Russian Federation conducted a study in 2022 aimed at identifying the effects achieved through the implementation of social sports projects and summarizing the approaches used to evaluate them.

Social effects of sports projects

Projects implemented in the sphere of physical culture and grassroots sport address a wide range of problems that go beyond the category of “sports”: a number of changes occur in the economy, education and professional sphere, adaptation and socialization, and demography. Sports projects also affect people’s well-being, by changing crime and disease rates. Such a broad range of impacts resulted in the creation of the “Sport for Development” concept, which emerged in the middle of the 20th century. The first scholar to set up its theoretical basis was the American psychologist Gordon Allport (1954), who suggested that contact between different groups of people with different characteristics, including gender, ethnicity and race, was the most effective means of fighting racism, prejudice, and discrimination.

Based on this theoretical framework, Alexis Lyras (2011) suggested that sport initiatives could promote personal development and social change through the use of non-traditional management methods and by combining sports with cultural and educational activities. A number of analytical portals concept are dedicated to the “Sports for Development” concept, for example: Sport for Development¹, and Sport and Development², along with multiple studies by global organizations such as UNICEF³ and the UN⁴. The impact of sports on the society as a whole can be summarized via the UN Sustainable Development Goals⁵.

1. Sport for Development. (2023). Retrieved from: https://www.sport-for-development.com/ home. (accessed 30.01.2023).

2. Sportanddev.org. (2023). Retrieved from: https://www.sportanddev.org/en. (accessed 30.01.2023).

3. UNICEF. (2019). Getting into the Game. Understanding the evidence for child-focused sport for development. Retrieved from: https://www.unicef-irc.org/getting-into-the-game. (accessed 30.01.2023).

4. United Nations. (2003). Sport for development and peace: Towards achieving the millennium development goals. Report from the United Nations Inter-Agency Task. Force on Sport for Development and Peace. Retrieved from: https://www.sportanddev.org/ sites/default/files/downloads/16__sport_for_dev_towards_millenium_goals.pdf. (accessed 30.01.2023). https://doi.org/10.18356/b7ee7a39-en.

5. Sportanddev.org. (2019). Measuring the contribution of sport, physical education and physical activity to the Sustainable Development Goals. Retrieved from: https://www. sportanddev.org/en/toolkit/sport-and-development-policy/policy-monitoring-andevaluation. (accessed 30.01.2023).

The effects generated by sports projects can be classified into positive and negative, and by the direction of the impact — in the context of the social sphere, health and economy (Figure 1).

The positive social and health effects of sports are well summarized and, more importantly, quantified in the work by Larissa Davies et al. (2019):

1. Exercise in sports leads to a 1% increase in education (11-18 years).

2. Graduates who had engaged in University sports earn 18 percent more a year on average than those who had not.

3. Exercise leads to a 1% decrease in criminal incidents among men aged 10-24.

4. Participation in sports is associated with higher subjective well-being.

5. Volunteering in sports is associated with improved individual subjective well-being and greater satisfaction with life. The time spent by volunteers is equivalent in value to an average hourly wage.

6. Athletes are 14.1% more likely to report good health than non-athletes. Sports and moderate-intensity physical exercise in adults, among other things, reduce the risk of:

• coronary heart disease and stroke in active men and women by 30% on average (between 11 and 52%);
• breast cancer in active women by 20% (between 10 and 30%);
• colorectal cancer by 24%;
• type 2 diabetes by 10%;
• dementia by 30% (between 21 and 52%).

Researchers from New Zealand reached similar conclusions⁶:

6. Sport New Zealand. (2023). The value of sport. Retrieved from: https://sportnz.org.nz/ resources/the-value-of-sport/. (accessed 30.01.2023).

• 84% of respondents agreed that sports help develop important life skills such as teamwork and cooperation;
• for New Zealanders who participate in sports, the level of well-being increases 59%;
• sports help develop social skills and make new friends (including for migrants);
• high-performance sports help instill a sense of pride in the country and contribute to national identity;
• physical activity and sports reduce the risk of cardiovascular diseases (7.9%), type 2 diabetes (9.8%), dementia (7.7%), breast cancer (13.1%), and stomach cancer (14.1%);
• sports and recreation provide 53,000 jobs and contribute $4.9 billion to GDP annually.

In terms of the impact of sports on the economy, Europe offers noteworthy experience⁷ . For example, in 2012, the gross domestic product (GDP) associated with sports was EUR 279.7 billion, or 2.12% of the total GDP in the EU. In addition, 5.67 million workers can be attributed to the sports industry, which is 2.72% of the total number. In other words, one in 47 Euros and one in 37 employees in the EU are directly related to sports. These figures were derived from costoutput tables for sports based on national Sport Satellite Accounts.

7. European Commission. (2012). Study on the Contribution of Sport to Economic Growth and Employment in the EU. Retrieved from: https://ec.europa.eu/assets/eac/sport/library/ studies/study-contribution-spors-economic-growth-final-rpt.pdf. (accessed 30.01.2023).

Indirect multipliers were also used in the calculations, taking into account that each business needs the raw materials from other industries to make its products and/or provide services. Multipliers show how much output from other sectors is needed to produce a certain commodity. For example, producing a sports car requires seats, which in turn requires textiles, etc. The magnitude of multipliers depends primarily on the structure of economic ties between the original sector and the other industries. The more sectors are interconnected, the higher the multipliers. Applying multipliers to direct effects generates indirect effects. For example, if a soccer stadium costs 30 million euros to build (direct effect), and the construction sector reports a multiplier of 1.8, the indirect effect would be (1.8 – 1.0) x 30, that is, 24 million euros. Note that the supply chain involves national enterprises as well as foreign countries, but the primary effects for the country depend only on the import-adjusted costs.

In terms of economic effects, it is also necessary to consider the athletes’ costs to purchase the equipment, pay for attending the sports sections, travel to competitions (payment for tickets, food, accommodation). In addition, a significant effect can be achieved by the growth of commercial indicators (sponsorship revenues) for those projects that attract a significant audience.

Territorial development⁸ is another important effect of many sports projects:

8. European Commission. (2020). Contribution of sport to regional development through Cohesion Policy 2021–2027. SHARE initiative research paper. Retrieved from: https://keanet.eu/wp-content/uploads/SHARE-The-contribution-of-sport-to-regionaldevelopment-through-CP-2021-2027-FINAL.pdf. (accessed 30.01.2023).

• stimulation of business activity;
• creation of local jobs (including indirectly through construction projects);
• increasing the appeal of the territories and improving their image;
• contributing to the innovation and development of information and communication technologies (ICT) with sporting content;
• greater economic mobility of the population.

In the context of territorial development, it is worth mentioning a whole block of studies devoted to the assessment of economic effects produced by major sport competitions: Gureeva & Solntsev (2014), Baade & Matheson (2004), de Nooij et al. (2013), Preuss (2007), Maennig & Zimbalist (2012).

Numerous studies have documented negative effects of sports as well. For example, it is well known that physical activity can be a stimulus towards alcohol consumption (Lisha et al., 2011). Many studies point to higher rates of alcohol use among athletes compared to non-athlete peers (Leichliter et al., 1998). A common explanation is that athletes tend to celebrate their victories (or experience failure), and teaming encourages this behavior (Leasure et al., 2015).

Sports can also have a negative impact on the environment, including by increasing emissions of harmful substances. For example, Wicker (2019) surveyed adults in Germany and asked them to report their sports-related travel, including in the context of regular (weekly) activities, sports competitions/tournaments, and training camps. The annual carbon footprint was estimated using information on travel distances and vehicles used. The results showed an average annual carbon footprint of 844 kg of emissions (carbon dioxide equivalent), with individual sports providing more emissions than team sports.

Another negative effect is aggression, abusive behavior and violence against competitors and referees. One example is Roman Shirokov, former captain of the Russian national soccer team, beating referee Nikita Danchenkov during the Moscow Celebrity Cup amateur tournament⁹. Peter Dawson et al. (2022) studied the effect of abuse on match officials’ decision to leave their jobs. Based on surveys of soccer referees in France and the Netherlands, the authors investigated factors associated with verbal and physical abuse of referees, as well as the relationship of such abuse to referees’ intentions to leave the profession.

9. Armand, N. (2020). Roman Shirokov Sentenced to Compulsory Work for Beating a Referee. Retrieved from: https://sportrbc.ru/ news/5fe5d56a9a7947e4123b977e. 25.12.2020. (accessed: 30.01.2023).

Sports can also have negative effects on relationships within the family. In particular, researchers highlight the high costs of playing sports to families (Kay, 2000; Dixon et al., 2008). Besides the financial obligations, the time costs are also increasing. Tess Kay (2000) notes that the need to exercise affects daily routines and causes changes in vacation plans and work schedules. Negative consequences can vary from increased stress and anxiety (O’Rourke et al., 2011) to decreased self-esteem and trauma (Kay, 2000). Feelings of jealousy and resentment or lack of time for other activities are also noted (Côté, 1999). Tess Kay (2000) found that some children who did not compete felt jealous of their siblings who did participate in sports and felt that their relationship with their parents was not as strong. Finally, it has been shown that parents become less active as a result of their children’s participation in sports (Dixon, 2009).

According to UEFA¹⁰, the negative effects of social sports can include injuries, doping use, corruption and the influence of gambling.

10. UEFA. (2019). The UEFA Grow SROI Model: Valuing the Impact of Football Participation in Europe. Retrieved from: https://www.knvb.nl/downloads/bestand/26276/uefa-sroi-finalreport. (accessed 30.01.2023).

Project efficiency assessment

Several approaches can be used to evaluate the effectiveness of individual projects that use physical activity and sports to achieve social and economic effects, including expert assessment, project evaluation (and monitoring) and monetary evaluation, such as Social Return on Investment (SROI) evaluation. We will consider the similarities and differences between these approaches using the Girls on the Soccer Field project as an example. The project was implemented in Turkey in 2016. Social Return on Investment was calculated for it, and the corresponding report was certified by Social Value, an international network promoting the SROI approach¹¹.

11. Social Value UK. (2023). Retrieved from: https://socialvalueuk.org/. (accessed 30.01.2023).

Description of the “Girls on the soccer field” project

The Girls on the Soccer Field project was created by Melis Abacıoğlu and her company Actifit in 2013. The year before that, Melis and her friends had organized a soccer game for women after their male friends refused to play against them.

The project includes the establishment of a Soccer Academy — for five days, the girls participate in soccer training, as well as creative master classes in visual and theatrical arts and creativity development. In addition, a lecture on gender equality was held for the parents of female Academy participants, who were invited to attend their daughters’ training sessions.

Project goals:

• Through soccer, raise awareness of gender equality and promote greater participation of girls in sports;
• Develop the girls’ creative potential through creative workshops.

Evaluation of social return on investment

The assessment began with a stakeholder analysis. The following groups were identified: girls participating in the Academy, their parents, volunteer trainers, Actifit (the organization implementing the project), donors who supported the project financially, the foundation that conducted a presentation on gender equality issues for the parents.

The next step in the evaluation process was data collection, which started immediately after the completion of the Academy. The data was mainly collected through survey. Questionnaires were developed for each stakeholder group. These included open-ended questions about participation in the various project activities and the results obtained, for example: “What did you gain from participating in the project? How did the project change your life? Were there any negative consequences of your participation in the project?”

Based on the data collected from all stakeholder groups, their contribution to the project was determined. For example, the girls, their parents, and the volunteer coaches contributed their time; the donors contributed money and sports equipment.

In addition, based on the analysis of the completed questionnaires, the positive and negative results obtained were determined, as well as the relationship between the project activities and results. It is worth noting that this analysis divided the results into expected (planned) and unplanned ones. In case of the girls, for example, the project produced three types of results. First, they became more confident and convinced about the possibility of gender equality. According to the researchers’ analysis, the following chain of changes led to the first result: through soccer training, girls realized that soccer was not just a game for boys, as they had previously thought; besides, soccer training allowed them to appreciate the positive effects of sports, which gave them self-confidence and created awareness of gender equality opportunities. Second, the girls developed imagination and creativity. Third, it was easier for girls to communicate with friends and parents. The authors consider the latter an unplanned outcome of the report, as it was not part of the project goals.

The project results for parents included increased awareness of gender discrimination and improved mutual understanding, as the parents started to communicate more with their daughters. Volunteer coaches have developed communication skills, gained coaching experience, and noted successes in personal growth through participation in the project.

Actifit, which prepared and implemented the project, was able to engage donors, partners and volunteers. Therefore, one of the positive results of the project for the company was saving its own financial resources and employee labor. Additionally, the company was able to make the project more sustainable. Finally, successful operation of the Soccer Academy in Eskisehir was a case study that Actifit can use to further promote its “Girls on the Soccer Field” program. Employee motivation associated with participation in this program has also increased. The negative result of the program was that three employees of the company spent 28 days of their time working on the project.

The next step was monetizing the contributions made by the stakeholders and the results obtained. Only financial and in-kind contribution by Actifit and the donors was taken into account during the monetary evaluation. The report authors decided not to include a monetary evaluation of the time spent on participation in the project by children, parents, and volunteer coaches.

In monetizing the results, the authors used data on the cost of paid services, which would enable the project participants to obtain similar results otherwise. For example, there is a paid soccer section in Eskisehir. The assumption was made that a week of paid soccer lessons would give the girls the same result in terms of developing selfconfidence and understanding the possibility of gender equality, so the cost of this week was used as a “proxy” in estimating the cost of the outcome.

Outside of the project, parents could learn to understand their daughters better and communicate with them more if they took a class with a family psychologist, so the cost of such a course was a monetary estimate for this outcome. Since no one lectures on gender inequality in Eskisehir on a fee basis, it is curious that raising parents’ awareness of gender discrimination has received zero monetary value.

The project SROI was then calculated based on the monetary estimates obtained, both for the project as a whole and for each individual group of stakeholders. The overall SROI for the project was 12.45 — that is, for every Turkish Lira (TL) invested in the project, 12.45 TL worth of social effect was produced. Of these 12.45 TL, the girls’ results accounted for 20% (2.43 TL) and the parents’ results accounted for 38% (4.68 TL).

Project evaluation

There are several different but similar approaches to evaluating projects. We prefer the one specifically described by the term ‘evaluation’. This approach features a set of analytical activities that are conducted to provide project's decision-makers with the information they need regarding the project. The decision-makers in this case are usually either project managers or donors.

This approach assumes that a monitoring and evaluation system is developed as early as at the project planning phase. The system is based on the results of stakeholder analysis and a description of the project mechanism, which explains how the implementation of project activities will lead to the achievement of expected results (this description is commonly referred to as the theory of change or logical framework of the project).

Accordingly, using this approach, a stakeholder analysis of the “Girls on the Soccer Field” project would have had to be conducted as early as the planning stage. After that, it would be necessary to build a change map or a logical framework that would explain how the project activities would eventually translate to the progress towards its goals. Building such a map could also help to specify the goals (final expected results) of the project. For example, one of the goals is formulated as follows: “Through soccer, raise awareness of gender equality and promote greater participation of girls in sports.” In developing a change map, one would need to decide what chain of changes connects a presentation on gender equality for girls’ parents to this goal: for example, more informed parents would support their daughters’ desire to play sports. At this point, one may deem it reasonable that the results of the presentation would be better placed in a separate chain of changes and isolated as a separate project goal.

Based on the map of expected changes, the project authors determine what information will be needed to track the progress of project implementation and achievement of its goals. The next step is to decide who, when and how will collect, analyze and use this information.

The key task of evaluation is to help project managers understand whether the intended mechanism for achieving change is actually being implemented. To manage the process of change, it is very important to know where there are failures in the process. Accordingly, the monitoring and evaluation system is designed to identify these failures. In addition, project management now pays a lot of attention to unplanned results, whether positive or negative. This is why data collection for project evaluation could be much the same as in the SROI evaluation described above. But the analysis would have a clear focus on the degree to which the planned results are being achieved, and which of the unplanned results are positive and negative.

It should be noted that any SROI calculation or another form of monetary evaluation can be incorporated in the project evaluation process if decision makers need this information.

Expert assessment

Expert assessment is generally used when the social results of a project cannot be measured, for whatever reason. It is most commonly used by donor organizations to assess project applications. Expert assessment is a judgment about the value of a project, about how good it is. When conducting an expert assessment, the client makes a list of criteria — the properties that a project must have, and the experts must answer how well the proposed project meets these criteria, based on the description provided in the project application and their own knowledge and experience. For example, if donors to the “Girls on the Soccer Field” project were to make a decision about funding based on expert assessment, they could use criteria such as whether the project is consistent with the strategy, whether the project is effective (able to achieve the expected results), whether the project is economically viable (uses the cheapest way to achieve the expected results) or there are more cost-effective options.

Since achieving the expected results is the main expectation of the project, the expert assessment can focus on a detailed analysis of the expected chains of changes. In this case, experts are presented with a detailed map of changes prepared by the project authors and are asked to assess the feasibility of all the links between the results, so any possible gaps can be found.

For example, when planning the “Girls on the Soccer Field” project, its authors might have planned the following chain of changes:

• Girls who, prior to the project, thought that soccer was a boys-only game take a full training course at the Academy (five days, three hours a day);
• As a result, they successfully learn the basic skills of the game;
• The girls successfully apply the new skills in practice games;
• The girls get satisfaction and enjoyment from the game;
• The girls understand that the idea that only boys are capable of playing soccer was false;
• Getting rid of one of the gender stereotypes helps girls see that gender equality is indeed possible.

During the project evaluation, the experts will need to answer how likely it is that completing one step in the chain will result in a successful implementation of the next step. For example, if the girls take a full course of training at the Academy (15 hours), what is the likelihood that they will learn the basic skills of the game?

Conclusion

Global experience shows that projects implemented in the sphere of physical culture and popular sports can create both significant positive social changes and negative effects. The study created a classification of these effects, which will help organizations implementing and supporting social sport projects to identify and evaluate them. The use of different types of assessment enables identification and measurement of the changes created at all stages of the project, which, in turn, helps to manage the change process better. In addition, the assessment is important to justify the amount of funding and the choice of strategic development areas, which is especially relevant in the current context, when all social initiatives can no longer count on the previous level of support from budgetary and non-budgetary sources.

Ilya Solntsev, doctor of Economics, Head of the Department of Management and Marketing in Sports, Financial University under the Government of the Russian Federation

Natalia Kosheleva, Сonsultant on monitoring and evaluation of social programs and projects, president of the Association of Specialists in Program and Policy Evaluation (ASPPE)

References: 1. Gureeva, E. A. & Solntsev, I. V. (2014). Assessment of the Economic Effect of Major Sporting Events. MOSCOW: Ru-Science Publishers. 92 pages 2. Allport, G. W. (1954). The nature of prejudice. MA: Addison-Wesley. 3. Baade, R. A., & Matheson, V. A. (2004). The quest for the cup: assessing the economic impact of the world cup. Regional studies, 38(4), 343-354. https://doi.org/10.1080/03434002000213888. 4. Côté, J. (1999). The influence of the family in the development of talent in sport. The sport psychologist, 13(4), 395-417. https://doi.org/10.1123/tsp.13.4.395. 5. Dawson, P., Webb, T., & Downward, P. (2022). Abuse is not a zero-sum game! The case for zero tolerance of match official physical and verbal abuse. European journal of sport science, 22(3), 417-424. https://doi.org/10.1080/ 17461391.2021.1881619. 6. Davies, L., Taylor, P., Ramchandani, G., & Christy, E. (2019). Social return on investment (SROI) in sport: a model for measuring the value of participation in England. International Journal of Sport Policy and Politics, 11(4), 585- 605. https://doi.org/10.1080/19406940.2019.1596967. 7. Nooij, M. D., Berg, M. V. D., & Koopmans, C. (2013). Bread or games? A social cost–benefit analysis of the World Cup bid of the Netherlands and the winning Russian bid. Journal of Sports Economics, 14(5), 521-545. https://doi.org/10.1177/1527002511429825. 8. Dixon, M. A., Warner, S. M., & Bruening, J. E. (2008). More than just letting them play: The enduring impact of parental socialization on female sport involvement. Sociology of Sport Journal, 25(4), 538-559. 9. Kay, T. (2000). Sporting excellence: A family affair? European Physical Education Review, 6 (2), 151–169. https://doi.org/10.1177/1356336X000062004. 10. Leasure, J. L., Neighbors, C., Henderson, C. E., & Young, C. M. (2015). Exercise and alcohol consumption: what we know, what we need to know, and why it is important. Frontiers in psychiatry, 156. https://doi.org/10.3389/fpsyt.2015.00156. 11. Leichliter, J. S., Meilman, P. W., Presley, C. A., & Cashin, J. R. (1998). Alcohol use and related consequences among students with varying levels of involvement in college athletics. Journal of American College Health, 46(6), 257- 262. https://doi.org/10.1080/07448489809596001. 12. Lisha, N. E., Martens, M., & Leventhal, A. M. (2011). Age and gender as moderators of the relationship between physical activity and alcohol use. Addictive Behaviors, 36(9), 933- 936. https://doi.org/10.1016/j.addbeh.2011.04.003. 13. Lyras, A., & Peachey, J. W. (2011). Integrating sport-for-development theory and praxis. Sport management review, 14(4), 311-326. https://doi.org/10.1016/j.smr.2011.05.006. 14. Maennig, W. & Zimbalist, A. S. (Eds.). (2012). International handbook on the economics of mega sporting events. Edward Elgar Publishing. 15. O’Rourke, D. J., Smith, R. E., Smoll, F. L. & Cumming, S. P. (2011). Trait anxiety in young athletes as a function of parental pressure and motivational climate: is parental pressure always harmful? Journal of applied sport psychology, 23(4), 398-412. https://doi.org/10.1080/10413200.2011.552089. 16. Preuss, H. (2007). The conceptualisation and measurement of mega sport event legacies. Journal of sport & tourism, 12(3-4), 207-228. https://doi.org/10.1080/14775080701736957. 17. Wicker, P. (2019). The carbon footprint of active sport participants. Sport Management Review, 22(4), 513–526. https://doi.org/10.1016/j.smr.2018.07.001. 18. Ozgun, S. H. (2016). Girls on the Soccer Field Academy. Social Investment Impact Assessment Report SROI Analysis. Retrieved from https://socialvalueuk.org/report/girls-soccerfield. (accessed 30.01.2023)

DOI 10.55140/2782-5817-2023-3-1-80-91

Хочешь стать одним из более 100 000 пользователей, кто регулярно использует kiozk для получения новых знаний?
Не упусти главного с нашим telegram-каналом: https://kiozk.ru/s/voyrl