Оценка социального вклада Благотворительного фонда «Даунсайд Ап»
Результаты исследования
Благотворительный фонд «Даунсайд Ап» уже 25 лет оказывает психолого-педагогическую поддержку семьям, в которых есть люди с синдромом Дауна разного возраста. С 2015 года фонд проводит оценку социального вклада своей деятельности. Последнее исследование демонстрирует общую результативность деятельности организации и вклад фонда в изменение отдельных сфер жизни благополучателей. В статье кратко описывается методология данного исследования и его основные результаты.
Некоммерческая организация «Благотворительный фонд «Даунсайд Ап» работает ради того, чтобы качество жизни людей с синдромом Дауна в России улучшалось: чтобы дети с синдромом Дауна жили в семьях, учились в общеобразовательных учреждениях, а взрослые нашли свое место в жизни общества, реализовали свой потенциал, имели возможность получить профессию и найти работу.
С 2015 года новым направлением работы фонда стала оценка социального эффекта деятельности «Даунсайд Ап» в целом и его отдельных программ и проектов. Оценкой занимается отдел стратегий при участии ключевых сотрудников организации. Результаты оценки имеют практическое применение: на их основе оптимизируются и улучшаются программы фонда, определяются перспективные проекты и направления, закладываются стратегические векторы развития.
Методология исследования
Оценка социального вклада1 Благотворительного фонда «Даунсайд Ап» базируется на Рамке результатов, разработанной в 2018 году. Это своеобразная «дорожная карта» от повседневной деятельности организации к достижению ее миссии. Рамка фиксирует непосредственные результаты деятельности (immediate results), интегрирует их в социальные результаты (social results) по отдельным направлениям в долгосрочной, среднесрочной и краткосрочной перспективе и, наконец, «укладывает» их в магистральные направления социального воздействия (social impacts). Рамка была сформирована и постоянно обновляется на основе систематического изучения проблем и потребностей благополучателей и других целевых групп (такие исследования в фонде проводятся ежегодно).
Эта система позволяет избегать нерелевантных проектов и сосредоточиться только на тех направлениях, которые отвечают миссии фонда.
В соответствии с Рамкой результатов, у «Даунсайд Ап» имеется четыре направления, определяющих социальные эффекты и результаты его деятельности:
- дети с синдромом Дауна развиваются в семье;
- дети с синдромом Дауна включены и обучаются в среде дошкольного и школьного образования;
- люди с синдромом Дауна работают в разных сферах;
- люди с синдромом Дауна взаимодействуют с обществом в различных формах.
Оценка социального вклада Благотворительного фонда «Даунсайд Ап» базировалась на основе опроса благополучателей — семей, в которых есть люди с синдромом Дауна. Каналами привлечения респондентов к опросу стали:
- рассылка по базе благополучателей «Даунсайд Ап» (на момент опроса в базе было около 10 500 семей);
- ссылка на опрос в социальных сетях фонда и родительских чатах участников групповых и индивидуальных занятий, которые проводятся в фонде;
- рассылка приглашения к опросу через партнерские НКО в различных регионах РФ.
Сбор анкет проводился в июне 2022 г. После обработки и удаления брака (дублей, некорректно заполненных анкет и т. п.) в массиве остались 544 анкеты, представляющие семьи с людьми с синдромом Дауна в возрасте от 0 до 18 лет и старше из 65 регионов РФ и других стран2.
2Точность выборки (доверительная вероятность) — 95%, погрешность (доверительный интервал) — ±4%.
Основу анкеты составили 15 ключевых вопросов, оценивающих разные аспекты социального вклада Благотворительного фонда «Даунсайд Ап». Ответы на эти вопросы формулировались единообразно: респонденты давали оценки по шкале от 0 до 5, где 1 — отсутствие вклада («совершенно не повлияло»), 5 — значительный вклад («очень сильно повлияло»), а 0 — затруднились ответить или вопрос неактуален. Такая унификация позволяла корректно сравнивать и анализировать данные по разным социальным направлениям. На основании этих ответов был составлен Сводный индекс социального вклада фонда «Даунсайд Ап» — интегральный показатель, отражающий продвижение организации в реализации своей миссии (индекс приведен к 100%).
Основные вопросы подкреплялись контрольными и уточняющими, чтобы лучше понимать специфику вклада фонда в те или иные изменения в жизни семьи. Кроме того, в анкете содержался открытый вопрос о том, как «Даунсайд Ап» помог семье в ее конкретной ситуации, какие проблемы удалось решить, а что не получилось. Более 80% семей описали свои случаи, причем не только в одобрительной форме. Это позволило увидеть как достижения, так и просчеты и недоработки.
Для фонда было важно понимать отдельные сегменты благополучателей и оценивать социальный вклад в изменения по каждому из них, поэтому в анкету также был включен социально-демографический блок (пол, возраст детей, место проживания семьи) и раздел о пользовании услугами Благотворительного фонда «Даунсайд Ап»: посещение групповых занятий для детей; получение индивидуальных консультаций педагогов, психологов и иных специалистов для семей; использование материалов, размещенных на сайте, в электронной библиотеке и в соцсетях фонда; участие в вебинарах и прямых эфирах для родителей и специалистов; получение почтовых и электронных рассылок для родителей и др.
В целом, анкета получилась достаточно объемной (около 60 вопросов). Фонд благодарит всех родителей, которые потратили свое время, чтобы предоставить организации столь обильный массив информации.
Основные результаты исследования
Социальный эффект 1: развитие ребенка в семейном контексте
Первым результатом при реализации своей миссии Благотворительный фонд «Даунсайд Ап» видит то, что дети с синдромом Дауна развиваются в семье. Здесь замерялись следующие параметры:
- Сохранение ребенка в семье.
- Улучшение детско-родительских отношений и общего климата в семье.
- Рост родительской компетентности в вопросах развития ребенка.
- Повышение уверенности родителей в своих силах и веры в возможности ребенка быть самостоятельным.
- Повышение родительской активности (проактивная позиция) в деле развития ребенка.
Согласно ответам респондентов, благодаря работе «Даунсайд Ап» 60 семей (10%) сохранили ребенка во время беременности, зная о том, что у него синдром Дауна, и 101 семейная пара (19%) оставила ребенка в семье после рождения. Экстраполяция этих данных позволила нам предположить, что значимый эффект от деятельности фонда проявляется в том, что сегодня каждая десятая семья среди наших благополучателей сохраняет ребенка с синдромом Дауна во время беременности и каждая пятая — после рождения.
Семьи также отметили ведущую роль «Даунсайд Ап» в улучшении их семейных отношений:
- 52% семей — со своим ребенком;
- 46% семей — создание благоприятного климата в своих семьях.
И наконец, вклад «Даунсайд Ап» в развитие родительских компетенций и формирование родительской позиции респонденты оценили следующим образом:
- 65% — начали лучше разбираться в том, как эффективно помогать своему ребенку;
- 63% — почувствовали себя более уверенно, стали меньше тревожиться;
- 61% — поверили в то, что их ребенок может быть самостоятельным;
- 64% — стали активнее участвовать в его развитии.
В качестве иллюстрации приведем пример того, как использовались уточняющие вопросы. Так, для более глубокого понимания родительских компетенций, помимо вопросов, непосредственно связанных с оценкой, благополучателям были заданы вопросы про овладение теми или иными навыками безотносительно к участию в этом «Даунсайд Ап». Также с помощью метода семантического дифференциала3 определялся локус контроля4 родителей и их представления о собственном ребенке — насколько они считают его уверенным, самостоятельным, творческим, активным и способным принимать решения.
3Метод, при котором респондент должен выбрать подходящее утверждение из пары: «сильный — слабый», «активный — пассивный» и т. д.
4Локус контроля показывает направленность личности на внешние или внутренние стимулы. Люди с преобладанием внешнего локуса контроля склонны возлагать ответственность за свою жизнь на внешние обстоятельства, меньше верят в свои силы и чаще нуждаются в помощи. Внутренний локус контроля связан с эмоциональной стабильностью, самостоятельностью, активной жизненной позицией, большей продуктивностью и устойчивостью к внешним воздействиям, а также достижительными стратегиями поведения.
Подобные уточняющие вопросы анкеты дали возможность не просто оценить социальный вклад фонда в конкретном направлении, но и получить дополнительную информацию для принятия управленческих решений и определения стратегии развития фонда:
- лучшее понимание стартовой точки родителей и их склонность применять полученные знания и умения (многомерность социального воздействия);
- актуальность работы не только с передачей родителям знаний и отработкой их навыков, но и с установками родителей (нелинейность социального воздействия);
- лучшее понимание благополучателей и сонастройка Рамки результатов с их позицией (совершенствование Рамки результатов и системы оценки).
Социальный эффект 2: обучение в образовательной среде
Для оценки данного эффекта замерялся параметр: успешность адаптации ребенка к образовательным учреждениям — детскому саду и школе. Опрос показал, что 43% респондентов (семей с детьми старше 3 лет) высоко оценили вклад «Даунсайд Ап» в адаптацию их ребенка к детскому саду и 53% семей с детьми старше 8 лет высоко оценили вклад в адаптацию их ребенка к школе.
Социальный эффект 3: возможности трудовой деятельности
Возможность человека с синдромом Дауна освоить профессию и его трудоустройство (трудозанятость) — неотъемлемая часть деятельности и миссии Благотворительного фонда «Даунсайд Ап». Для замера данного эффекта использовались следующие параметры:
- Понимание родителями необходимости трудовой занятости их детей и уверенности в достижении этой цели.
- Повышение мотивации людей с синдромом Дауна иметь работу/трудовую занятость.
Согласно результатам опроса, 46% родителей детей старше 7 лет отметили, что благодаря фонду «Даунсайд Ап» изменили свои представления о нужности трудовой занятости своего ребенка и поверили в его возможность работать. 50% родителей людей с синдромом Дауна старше 18 лет сообщили, что благодаря усилиям благотворительного фонда у их ребенка появилось желание работать.
С помощью уточняющих вопросов удалось получить очень полезные для деятельности данные:
- 82% родителей детей старше 7 лет хотят, чтобы их дети работали;
- 66% родителей детей старше 7 лет говорят, что беседуют со своими детьми об их будущей работе (регулярно или время от времени);
- 71% родителей молодых людей старше 18 лет говорят, что их повзрослевший ребенок высказывает желание работать.
Социальный эффект 4: взаимодействие с обществом
Активное и конструктивное взаимодействие с обществом — основа полноценной жизни каждого конкретного человека с синдромом Дауна. Для оценки данного эффекта замерялись следующие параметры:
- Успешность адаптации людей с синдромом Дауна к взрослой жизни.
- Готовность родителей отстаивать интересы своих детей.
- Улучшение отношения общества к людям с синдромом Дауна. Были получены следующие ответы:
- 59% семей с детьми от 13 лет и старше высоко оценили роль «Даунсайд Ап» в адаптации их ребенка ко взрослой жизни;
- 56% семей считают, что усилия фонда повлияли на их личную готовность отстаивать интересы своих детей;
- 75% семей полагают, что деятельность организации заметно повлияла на то, что российское общество в целом стало более терпимо и доброжелательно относится к людям с синдромом Дауна
Сводный индекс
Среднее значение сводного индекса составило — 53,9%
Вклад отдельных направлений (социальных эффектов) в достижение миссии следующий:
- Развитие детей с синдромом Дауна в семейном контексте — 47%
- Включенность и обучение детей с синдромом Дауна в среде дошкольного и школьного образования — 19%
- Работа людей с синдромом Дауна в разных сферах — 10%
- Взаимодействие людей с синдромом Дауна с обществом в различных форматах — 24%
В направлении «Люди с синдромом Дауна работают в разных сферах» индекс вклада колеблется от 0% в семьях с детьми в возрасте 0-3 года до 19% в семьях с детьми 13+. По остальным направлениям оценки колебания индекса не так велики.
Общие выводы, ограничения и перспективы
В рамках данного исследования из-за ограниченности ресурсов не удалось затронуть некоторые важные аспекты:
1) Измерить экономическую целесообразность и экономичность деятельности Благотворительного фонда «Даунсайд Ап».
2) Вовлечь в исследование самих людей с синдромом Дауна.
3) Оценить потенциальные негативные эффекты от деятельности фонда. Данные аспекты «Даунсайд Ап» анализирует в рамках других исследований. К примеру, недавно были проведены индивидуальные глубинные интервью с 20 молодыми людьми с синдромом Дауна — благополучателями фонда.
Оценка социального вклада — это итог серьезного размышления, комплексной работы и проявление ценностной философии организации. Для фонда это еще и демонстрация ответственного отношения к ресурсам, которые предоставляют доноры. Работа по оценке деятельности, которая проводится в «Даунсайд Ап» — это своеобразный вызов самим себе: насколько фонд готов увидеть реальные результаты своей деятельности и на их основе корректировать и изменять существующие программы. Оценке подвергаются именно те проекты и программы, которые успешно реализуются уже много лет и служат достижению миссии фонда. Такой подход позволяет увидеть непосредственный вклад организации в те или иные изменения в жизни благополучателей и развивать работу в данных направлениях. Цифры, которые специалисты фонда получают в ходе оценки, имеют ценность, только если они служат основой для формулировки рекомендаций, которые затем можно использовать в практической работе.
Александр Боровых
Руководитель отдела стратегий фонда «Даунсайд Ап»
Мария Фурсова
Обозреватель фонда «Даунсайд Ап»
Анна Хомякова
Аналитик отдела стратегий фонда «Даунсайд Ап»
DOI 10.55140/2782-5817-2023-3-2-60-67
Social Impact Assessment by the Downside Up Charitable Foundation.
The Downside Up Charitable Foundation has been providing psychological and educational support for families with people with Down syndrome of various ages for 25 years. Social impact assessment became part of the Foundation’s operation in 2015. The latest study demonstrates the overall effect of the organization’s performance and its contribution to changes in the beneficiaries’ lives. This article briefly describes the methodology of the study and its key findings.
Downside Up Charitable Foundation is a non-profit organization working to improve the quality of life for people with Down syndrome in Russia: making sure that children with Down syndrome to live in families and attend mainstream educational institutions, and that adults can find their place in the society, reveal their potential, have an opportunity to learn a profession and find a job.
Since 2015, the Foundation’s work gained a new focus — conducting social impact assessment of Downside Up as a whole and of its individual programs and projects. The assessment is done by the Foundation’s Strategy Department with the participation of key employees throughout the organization. The findings of the assessment are used in practice to optimize and improve the fund’s programs, identify the most promising projects and areas, and lay down strategic development vectors.
Research methodology
Social Impact Assessment1 of the Downside Up Charitable Foundation is based on the Results Framework developed in 2018. This is a kind of a “roadmap” showing the path from the day-to-day activities of the organization to achieving its mission. The framework records the immediate results of activities, integrates them into long-term, medium-term, and short-term social results in certain areas, and finally “stacks” them in the main directions of social impact (social impacts). The framework was set up and is constantly updated on the basis of systematic research into the problems and needs of the beneficiaries and other target groups (the Foundation conducts this research annually).
1Read the full study and its findings here: https://downsideup.org/elektronnaya-biblioteka/ otsenka-sotsialnogo-vklada-blagotvoritelnogofondadaunsayd-ap/.
This system makes it possible to avoid irrelevant projects and to focus only on those areas that meet the Foundation’s mission. According to the Results Framework, Downside Up has four areas determining its social effects and outcomes:
- children with Down syndrome develop in the family;
- children with Down syndrome are included and educated in preschool and school environments;
- people with Down syndrome work in many different areas;
- people with Down syndrome interact with the society in a variety of ways.
The Downside Up Charitable Foundation’s social impact assessment was based on a survey of the beneficiaries — families of people with Down syndrome. The following channels were used to get the respondents engaged in the survey:
- mailing to the Downside Up database of beneficiaries (about 10,500 families were included in the database at the time of the survey);
- link to the survey posted in the Foundation’s social media pages and in the parents’ chats of group and individual class participants organized by the Foundation;
- sending out an invitation to the survey through partner nonprofits in various provinces of the Russian Federation.
The questionnaires were collected in June 2022. After processing and removing the duplicates, incorrectly completed questionnaires, etc., the researchers received 544 questionnaires representing families with Down syndrome patients aged 0 to 18 years and older from 65 regions of Russia and other countries2.
2Sampling accuracy (confidence probability) is 95%, error margin (confidence interval) is ±4%.
The questionnaire was based on 15 key questions assessing different aspects of social impact of the Downside Up Charitable Foundation. All the questions were formulated uniformly: the respondents had to answer each question on a scale from 0 to 5, where 1 indicated no contribution (“no impact at all”), 5 indicated a significant contribution (“very strong impact”), and 0 indicated difficulty answering or the question being irrelevant. This unification made it possible to correctly compare and analyze data on different social areas. Based on the responses, we compiled the Downside Up Foundation’s Consolidated Social Impact Index — an integral indicator reflecting the organization’s progress in achieving its mission (the index is scaled to 100%).
The basic questions were supported by test and follow-up questions to better understand the specifics of the Foundation’s contribution to particular changes in the lives of the beneficiaries’ families. In addition, the questionnaire contained an open-ended question about how Downside Up helped the family in their particular situation, what problems were solved, and what failed. More than 80% of the families described their cases, and not all of the feedback was favorable. This allowed us to see our shortcomings and miscalculations, not just the achievements.
It was important for the Foundation to understand the individual segments of beneficiaries and evaluate the social impact of our activities for each segment, so the questionnaire also included a sociodemographic block (gender, children’s age, place of residence of the family) and a section on the use of services of the Downside Up Charitable Foundation: attending group sessions for children; receiving individual consultations from teachers, psychologists and other specialists for the families; using materials posted on the organization’s website, electronic library and social media; participating in webinars and live streams for parents and specialists; receiving mailings for parents, etc.
The questionnaire turned out quite heavy (about 60 questions). The Foundation thanks all the parents who took the time to provide the organization with such a wealth of information.
Key research findings
Social impact 1: child development in a family context
The Downside Up Charitable Foundation’s first goal is that children with Down syndrome develop within a family. The following parameters were measured here:
- Keeping the child in the family.
- Improving child-parent relationships and the overall climate in the family.
- Growth of the parents’ competence in child development.
- Increasing parents’ confidence in their own abilities and confidence in their child’s ability to be independent.
- Increasing parents’ proactive position in developing their child.
According to the respondents, 60 families (10%) decided to keep their child during pregnancy, knowing he or she had Down syndrome, and 101 couples (19%) kept their child after birth thanks to Downside Up’s work. By extrapolating this data, we can assume that the foundation’s activities have a clearly visible impact in the fact that one in ten families today (from among our beneficiaries) keeps the child with Down syndrome during pregnancy and one in five keeps the child with Down syndrome after birth.
Families also noted Downside Up’s leading role in improving their family relationships:
- 52% of families — between them and their child;
- 46% of families — creating a general favorable climate in their families.
Finally, the respondents assessed Downside Up’s contribution to the development of the parents’ competence and attitudes as follows:
- 65% got a better understanding of how to help their child effectively;
- 63% felt more confident and less anxious;
- 61% believed that their child could be independent;
- 64% became more actively involved in the child’s development.
To illustrate, here is an example of how follow-up questions were used. To gain a deeper understanding of parenting competencies, in addition to questions directly related to the assessment, beneficiaries were asked questions about mastering certain skills regardless of Downside Up Foundation’s involvement. Also, the semantic differential method3 was used to determine the parents’ locus of control4 and their ideas about their child — how confident, independent, creative, active and capable of making decisions they believed their child was.
3A method in which the respondent must choose the more appropriate statement from a pair: “strong — weak”, “active — passive”, etc.
4Locus of control shows a person’s focus on external or internal stimuli. People with a dominant external locus of control tend to place responsibility for their lives on external circumstances, have less confidence in their own abilities and need help more often. Internal locus of control is associated with emotional stability, independence, an active lifestyle, greater productivity and resistance to external influences, and attainable behavioral strategies.
With these follow-up questions, the questionnaire could be used not only to assess the Foundation’s social impact in a particular area, but also to obtain additional information enabling management decisions and determining the development strategy of the Foundation:
- a better understanding of the parents’ starting point and their inclination to apply the knowledge and skills gained (multidimensionality of social impact);
- the relevance of working not only with the transfer of knowledge to parents and improving their skills, but also changing their attitudes (non-linearity of social impact);
- a better understanding of the beneficiaries and a better alignment of the Results Framework with their position (improving the Results Framework and the assessment system).
Social impact 2: learning in an educational environment
To assess this effect, we measured the success of the child’s adaptation to educational institutions — kindergarten and school. The survey showed that 43% of the respondents (families with children over the age of 3) appreciated Downside Up’s contribution to their child’s adaptation to kindergarten, and 53% of families with children over the age of 8 appreciated its contribution to their child’s adaptation to school.
Social impact 3: employment opportunities
The opportunity for a person with Down syndrome to learn a profession and get employed is an integral part of the mission and activities of the Downside Up Charitable Foundation. The following parameters were used to measure this effect:
- The parents’ understanding of the need for their children’s employment and confidence in achieving this goal.
- Increasing motivation for people with Down syndrome to get a job/employment.
According to the survey, 46% of parents of children over the age of 7 said that, thanks to the Foundation, they had changed their views on their child’s need for employment and started believing in their child’s ability to work. 50% of parents of people with Down syndrome over the age of 18 reported that their child became willing to work, thanks to the Foundation’s efforts.
With the help of follow-up questions, it was possible to obtain very useful data for the activity:
- 82% of parents of children over the age of 7 want their children to work;
- 66% of parents of children over the age of 7 say they talk to their children about their future jobs (regularly or occasionally);
- 71% of parents of young adults over 18 say their adult child expresses a desire to work.
Social impact 4: interaction with the society
Active and constructive interaction with the society is the basis for a better and more complete life for each Down syndrome patient.
The following parameters were measured to assess this impact:
- Successful adaptation of people with Down syndrome to adulthood.
- Parents’ willingness to stand up for their children.
- Improving public attitudes toward people with Down syndrome.
The following responses were received:
- 59% of families with children ages 13 and older rate Downside Up highly for the role the Foundation plays in their child’s adjustment to adulthood;
- 56% of families believe the Foundation’s efforts had an impact on their personal willingness to stand up for their children;
- 75% of families believe that the organization’s activities have had a noticeable impact on the Russian society as a whole becoming more tolerant and welcoming of people with Down syndrome.
Composite index
The average value of the composite index was 53.9%
The contribution of individual social impact areas to achieving the organization’s mission is as follows:
- Development of children with Down syndrome in the family context — 47%
- Inclusion and education of children with Down syndrome in preschool and school environments — 19%
- The employment of people with Down syndrome in different areas — 10%
- The Interaction between people with Down syndrome and the society in various formats — 24%
In the “Employment of people with Down syndrome in different areas” direction, the contribution index varies from 0% in families with children ages 0-3 to 19% in families with children aged 13+. Index fluctuations in other areas are not as high.
General conclusions, limitations and perspectives
Some important aspects could not be touched upon in this study due to limited resources:
1) Measuring the economic feasibility and cost-effectiveness of the Downside Up Charitable Foundation.
2) Involving Down syndrome patients themselves in the research.
3) Evaluating the potential negative impact of the Fund’s activities. These aspects are part of other studies by the Downside Up Foundation. For example, individual in-depth interviews were recently conducted with 20 young people with Down syndrome, all of them being the Foundation’s beneficiaries.
Social impact assessment is a result of serious reflection, comprehensive work, and a manifestation of the organization’s value-based philosophy. It is also a demonstration of the Foundation’s responsible attitude toward the resources provided by the donors. The evaluation work conducted by Downside Up is a kind of a challenge to ourselves: how well prepared the foundation is to seeing the actual results of its activities and to adjust and change existing programs based on these findings. The projects and programs evaluated are those that have been running successfully for many years and form the core of the Foundation’s mission. This approach makes it possible to see the organization’s direct impact on the changes in the beneficiaries’ lives and to develop operations in these areas. The figures that the foundation specialists receive in the course of impact assessment studies are only valuable if they are used to formulate recommendations that can then be applied in practical work.
Alexander Borovykh
Head of the Strategy Department, Downside Up Foundation
Maria Fursova
Columnist, Downside Up Foundation
Anna Khomyakova
Analyst, Strategy Department, Downside Up Foundation
DOI 10.55140/2782-5817-2023-3-2-60-67
Хочешь стать одним из более 100 000 пользователей, кто регулярно использует kiozk для получения новых знаний?
Не упусти главного с нашим telegram-каналом: https://kiozk.ru/s/voyrl