Позитивные измененияБизнес

Из точки А в точку Б проверенным маршрутом

Теория изменений как инструмент планирования и оценки импакта

Мейнстримом для международных проектов развития еще в 90-е гг. XX века стала теория изменений. Популярность этого инструмента проектирования и оценки в России постепенно растет. Ее ключевое значение — это смена парадигмы в отношении проектов социальных изменений. Теория изменений рассматривает причинно-следственные связи в достижении социальных результатов посредством выбранных действий. Как благодаря теории изменений сделать проект более обоснованным и понятным для инвесторов и исполнителей — в нашем материале.

Концептуализация понятия: что такое теория изменений

Теория изменений как концепция появилась в ходе обсуждения теоретически обоснованных практик оценки проектов. Эта методология вдохновляется теорией социальных изменений — как обоснованное критическое вмешательство в реальность на принципах диалога и равноправия. В соответствии с определением Рингхофер и Кохлвег: «Теория изменений — это методология для планирования, управления и оценки проектов развития и позитивных социальных изменений» (Ringhofer & Kohlweg, 2019).

Теория изменений как методология в качестве своих принципов наследует ориентацию на развитие и расширение возможностей в рамках проектов социальных изменений (там же). Ключевые компоненты теории изменений включают в себя описание социального изменения, набора действий для достижения изменения, описание непосредственных и промежуточных эффектов, а также условий и допущений для достижения итогового импакта.

Сформировавшись как самостоятельная методология в 1990-е годы, сейчас теория изменений стала мейнстримом в сфере международных проектов развития. Ее ключевое значение — это смена парадигмы в отношении проектов социальных изменений. Вплоть до конца 1990-х гг. проекты действовали по принципу «черного ящика»: на вход системы подаются ресурсы и действия, а на выходе из нее каким-то неизвестным образом получаются социальные результаты. Теория изменений «распаковывает» этот черный ящик и рассматривает причинно-следственные механизмы достижения социальных результатов посредством выбранных действий. Таким образом, проект становится более обоснованным и явным в своем содержании, а потому — более понятным для инвесторов и исполнителей.

Смежные понятия: какие существуют похожие инструменты

Наряду с теорией изменений существует ряд других инструментов, которые время от времени представляют как теорию изменений.

• Теория изменений — повествовательное описание, обычно сопровождаемое графическим или визуальным описанием того, как и почему ожидается достижение цели или результата в конкретном контексте. Она устанавливает причинно-следственные связи между элементами проекта: если действия выполнены и предпосылки верны, то можно ожидать определенных результатов.
• Логическая модель — графическое или визуальное изображение теории изменений, иллюстрирующее связь между тем, что будет делать проект, и тем, чего он надеется достичь.
• Логическая схема (LogFrame) — тип логической модели, представленный в табличном формате, который обеспечивает упрощенное описание того, как проект должен функционировать в форме линейной цепочки причин и следствий.

Стоит заметить, что теория изменений — это не только таблица или блок-схема, а повествовательный текст с описанием не только причинно-следственных связей от действий до результатов, но и с указанием на предпосылки, выполнение которых необходимо для исполнения предположений о тех или иных связях. Теория изменений отличается нелинейностью структуры и признанием того, что на успех проекта влияют не только его исполнители, но и другие факторы, которые нужно учитывать так же, как и действия в рамках проекта.

Российский опыт использования теории изменений

Обзор российского опыта, связанного с использованием теории изменений, стоит начать с рассказа об экспертной записке «Применение теории изменений для стратегического аудита и стратегического планирования в России» Центра перспективных управленческих решений и Счетной палаты РФ. В статье, написанной генеральным директором Центра Марией Шклярук и опубликованной в «Российской газете», рассказывается о специфике первых шагов к использованию теории изменений на федеральном уровне — этот инструмент внедряется как способ связать стратегические цели и перечень действий для их достижения с отдельным акцентом на достигаемом социально-экономическом эффекте. В качестве академической ссылки указывается, в частности, Кэрол Вайс, которая считается автором термина «теория изменений», с тезисом о том, что для достижения социально-экономических эффектов требуется обоснованное предположение о механизмах реализации (Шклярук, 2020).

К настоящему времени экспертная записка этого коллектива авторов (Ким, Копыток, 2020) представляется наиболее обоснованной и структурированной адаптацией теории изменений для российского контекста, по меньшей мере — для использования при планировании государственных программ. Она сопровождается примерами из опыта в сфере государственного управления, например, приводится дерево проблем проекта социального контракта в направлении оказания помощи по поиску работы. От проблемы высокого уровня, например высокого уровня бедности, через «ветви» дерева можно спуститься к конкретным источникам причин проблемы — скажем, неэффективность традиционных мер соцподдержки для ряда социальных категорий. Очень важным замечанием является параграф об измерении результативности при отсутствии необходимых данных: здесь авторы проговаривают наиболее сильное преимущество подхода теории изменений в части оценки изменений, которое заключается в том, что наличие обоснованного предположения о причинноследственных связях восполняет доказательные пробелы.

Примером использования теории изменений в России вне государственного сектора, получившим широкое освещение в связи с упоминанием в первом русскоязычном пособии по Теории изменений, является разработанная в 2010–2011 году теория изменений Благотворительного детского фонда «Виктория» (Кузьмин, Кошелева, 2014). К этому кейсу продолжают обращаться на разнообразных практикумах по разработке теории изменений, например, вебинарах АНО «Эволюция и Филантропия», Московской школы управления «Сколково»: в них делается акцент на структуре теории изменений с указанием на важность формулирования допущений/условий и составления карты результатов в обратном порядке. Стоит отметить, что в российском опыте не происходит подмены теории изменений логической схемой. Также в разных российских интерпретациях этой концепции, которые в качестве референтного примера указывают опыт Благотворительного фонда «Виктория», остается один и тот же набор элементов теории изменений: ресурсы (inputs), действия (activities), результаты (outputs), эффекты (outcomes), воздействие (impact).

Также принципы теории изменений используются в Стандарте доказательности социальных практик в сфере детства, разработанном при поддержке Фонда Тимченко, Центра доказательного социального проектирования Московского государственного психолого-педагогического университета и Фонда президентских грантов. Важность этих принципов состоит в том, что они показывают неотъемлемость теории изменений для оценки социального импакта. Для оценки проекта необходимо иметь прописанную теорию изменений с тем, чтобы сформулировать предмет измерения. В социологической статье об изменении субъективного благополучия указывается, что для определения понятия «благополучие» используется теория изменений, в рамках которой указываются деятельность и цепочка социальных результатов (Archakova & Garifulina, 2020). Ранее отмечалось, что концепт благополучия является ключевым для измерения, потому что позволяет вовлекать целевые группы и именно на позитивные изменения благополучия в итоге направлены социальные проекты.

Более того, описанные в стандарте инструменты мониторинга и оценки с вовлечением разнообразных данных из разных источников могут быть включены в проект на этапе планирования, и наиболее простой способ сделать это — соотнести пункты из теории изменений с соответствующими им индикаторам и методами исследования. Как пишут ранее упомянутые авторы, при помощи теории изменений происходит операционализация измеряемого концепта, что позволяет сформулировать средства оценки.

Популярность теории изменений как инструмента проектирования и оценки в России растет постепенно. Некоторые грантодающие организации, например, фонд «Навстречу переменам», фонд «Дорога к дому» внедряют практику представления грантовых заявок в формате описания теории изменений, сопровождая это образовательными программами, позволяющими заявителям познакомиться с данным инструментом проектной работы.

Хотя говорить о широкой практике внедрения пока не приходится. В частности, как показывает исследование зарубежного российского опыта проведения оценки проектной деятельности НКО¹, Фонд президентских грантов, являющийся на сегодняшний день самой крупной структурой, финансирующей социальные проекты в стране, не видит пока перспектив и возможностей для внедрения теории изменений, как и требований по оценке социальных эффектов и импакта для своих грантополучателей, считая, что это значительно усложнит процедуру выдачи и получения грантов. В целом, применение теории изменений в России на данном этапе является скорее исключением, чем общим стандартом и правилом. Во многом это обусловлено трудоемкостью реализации данного метода, в том числе отсутствием соответствующих цифровых инструментов, упрощающих задачу, а также, в целом, информации о порядке и процедурах разработки теории изменений. Стоит отметить, что первое методическое пособие по разработке теории изменений на русском языке было опубликовано только в 2021 году.

1. Отчет о научно-исследовательской работе «Исследование современного зарубежного и российского опыта проведения оценки проектной деятельности некоммерческих организаций» (2020). Режим доступа: https://impact.ngo.ru/library/view/50 (дата доступа: 21.09.2022)

Интересно при этом, что в сборнике англоязычных статей, посвященных использованию теории изменений в мировой практике, этот подход характеризуется как модный и чрезмерно используемый («trendy, over-used … methodology») (Vun, 2021). Это ярко демонстрирует разрыв в используемых подходах в проектах, предполагающих социальные изменения. С одной стороны, догоняющее развитие позволяет избежать проблем роста: позднее внедрение технологии позволяет избежать ошибок ранней версии. К таким ошибкам в контексте теории изменений можно отнести недостаточный уровень внедрения практик мониторинга и оценки, а также отсутствие вовлеченности затронутых игроков. С другой стороны, с момента рефлексии об этих слабых местах методологии прошли годы и даже десятилетия, а использование методологии в России остается на начальном уровне без наличия какого-либо аналога.

Труктура теории изменений: пример теории позитивных изменений

На основании рассмотренных источников можно вычленить неизменные элементы теории изменений и добавить к ним элементы оценки и вовлечения, адаптированные для российского контекста. Так получилась разработанная Фабрикой² «Теория позитивных изменений», которую можно выделить среди других подходов к созданию теории изменений. Преимуществами данного подхода является то, что за счет акцента на условиях и допущениях в результате получается именно теория изменений, а не логическая модель. Обязательным элементом Теории позитивных изменений являются индикаторы элементов в карте результатов: индикаторы не только позволяют уточнить предмет социальных изменений, но и выстроить необходимые каналы коммуникаций с целевыми аудиториями, что необходимо для их вовлечения. Особенностью Теории позитивных изменений, дополняющей традиционный подход, является наличие двух дополнительных блоков для расчетов индекса доказательности и индекса обоснованности. Первый указывает на характеристики модели мониторинга и оценки, второй — характеризует источники обоснований суждений о запланированных изменениях. Кроме того, модель дополнена экономическими расчетами — текущей ликвидностью, финансовой устойчивостью и рентабельностью продаж для проектов, предполагающих наличие механизма финансовой устойчивости посредством реализации товаров/услуг (т. е. социального предпринимательства).

2. Фабрика позитивных изменений — платформа создания и развития проектов позитивных изменений в различных сферах деятельности человека и общества, разрабатывающая научные и практические подходы в этой сфере. Подробнее: www.positive-changes.ru

Словосочетание «позитивные изменения» в названии подхода отсылает к понятию импакта как социальных изменений в результате проекта развития. Теория позитивных изменений использует принятую в России лексику (например, из правил подачи заявок на грант Фонда президентских грантов³ и упомянутого Стандарта доказательности социальных практик) и выстраивает ее в качестве элементов теории изменений, которые взяты, в частности, из пособия «Теория изменений за десять шагов» Джеймса Ноубла (2019) и публикаций Джона Мэйна (2006). В настоящий момент Теория позитивных изменений включена в модель оценки проектов социального предпринимательства, планируемой к внедрению Фондом поддержки социальных проектов — федеральной структуры, которая занимается развитием среды социальных проектов и социального предпринимательства в России.

3. Как заполнить раздел «О проекте». Фонд президентских грантов. Режим доступа: https://поддержка.президентскиегранты.рф/Article/?id=84 (дата доступа: 21.09.2022)

Теория позитивных изменений состоит из двух блоков. Первый  — это дерево проблем с описанием текущей ситуации, целевой аудитории и проблемы целевой аудитории в контексте ситуации, которая подлежит позитивному изменению. Второй блок — это карта позитивных изменений — карта результатов проекта, выстроенных в соответствии с цепочкой социальных результатов от деятельности через результаты и эффекты в сторону социального импакта как финальной точки назначения.

Дерево проблем

• Ситуация характеризуется объективными показателями на основании проверенных источников данных, с конкретизацией географического и временного измерений.
• Целевые аудитории описываются аналогично с указанием конкретных характеристик и качеств, которую делают эту аудиторию особенной. В качестве практик вовлечения заинтересованных сторон, для каждой аудитории необходимо прописать канал коммуникации для сбора обратной связи — это важно для определения целей проекта, образа импакта и индикаторов социальных изменений.
• Проблема — это часть реальности, которая подлежит изменению в рамках проекта и формулировка которой представляет собой конкретизацию рамок проекта (временных, географических и социально-демографических).
• Причины проблемы — это связующее звено между проблемой и социальными эффектами, которые предполагается осуществлять в рамках проекта. Предполагается, что проблема является достаточно абстрактной категорией, которую можно сделать более конкретной через рассмотрение ее причин, подлежащих решению.

Карта позитивных изменений

Карта позитивных изменений состоит из восходящей цепочки результатов, которые позволят позитивно изменить проблемную ситуацию и конкретную часть жизни целевой аудитории.

Каждое звено в цепочке результатов, как того требует стандарт доказательности социальных практик, сопровождается индикаторами — объективным показателем степени достижения заявленной задачи. Для переходов от результатов к социальным эффектам и от социальных эффектов к социальному импакту требуется обоснование — на каких именно материалах основывается предположение, что причинно-следственная связь работает именно таким образом. Условия и допущения — это также обязательный пункт для каждого элемента карты позитивных изменений. Они описывают, при каких обстоятельствах предполагается указанная причинно-следственная связь.

• Деятельность — это самый начальный этап цепочки социального воздействия, то, что непосредственно делает проект, его мероприятия.
• Непосредственные результаты  — это то, на что направлена деятельность. Стоит отметить, что выполнение деятельности — это не результат. Проведение мероприятия не является результатом мероприятия, но просто индикатором деятельности. Результаты — это те новые качества, которые приобрели люди из целевой аудитории в результате деятельности.
• Социальные эффекты — это кратко- и среднесрочные последствия результатов при соблюдении условий и предпосылок, продолжительные изменения в жизни целевых аудиторий.
• Импакт — это долгосрочные последствия социальных эффектов при соблюдении условий и предпосылок. Это связь проекта и поставленной проблемы — какой именно вклад вносит проект в ее решения, как этот вклад измеряется и чем доказывается то, что он может произойти.

В качестве итога Теории позитивных изменений получается последовательная карта результатов, направленных на решение проблем и их причин из дерева проблем, с соответствующими индикаторами, обоснованиями логических связей и допущениями причинно-следственных связей. Логическая схема для методологии Теории позитивных изменений представлена ниже.

До конца 2022 года Теория позитивных изменений, разработанная Фабрикой, будет представлена в формате открытого онлайн инструмента, что позволит большему числу проектов получить возможность планировать и оценивать социальное воздействие с помощью этого инструмента.

Заключение

Теория изменений — это инструмент разработки и менеджмента проектов позитивных социальных изменений. Методология, впервые упомянутая в 1997 году, в соответствии со своими собственными принципами, находится в процессе непрерывного становления. За последние 20 лет наличие проектной документации по модели теории изменений стало обязательным критерием как для импакт-инвестиций, так и для проведения системной оценки достигнутых социальных результатов. В России теория изменений только начинает внедряться и использоваться в качестве основы для социального импакта. Теория позитивных изменений представляется как один из шагов в сторону внедрения методологии теории изменений в России. Важным фактором распространения данного инструмента, на наш взгляд, станет создание доступного и удобного онлайн-инструмента для заполнения и визуализации пути движения из точки А в точку Б — в направлении достижения импакта проекта.

Иван Смекалин, аналитик Фабрики позитивных изменений

Список источников: 1. Ringhofer, L., Kohlweg, K. (2019). Has the Theory of Change established itself as the better alternative to the Logical Framework Approach in development cooperation programmes? Progress in Development Studies, 19(2), 112–122. https:// doi.org/10.1177/1464993418822882. 2. Archakova, T, Garifulina, E. (2020). Measuring Сhildren’s Subjective Well-Being in Russia: Local Practices and Federal Strategies. Monitoring of Public Opinion: Economic and Social Changes, 1, 276–295. https://doi.org/10.14515/ monitoring.2020.1.11. 3. Vun, G. (2021). Analysing the Credibility of Theories of Change. In Theories of Change, 41–49. Springer, Cham. https://doi.org/10.1007/978–3-030–52275–9_3. 4. Noble, J. (2019). Theory of change in ten steps. London: New Philanthropy Capital. Retrieved from https://www. thinknpc. org/resource-hub/ten-steps (accessed: 21.09.2022). 5. Ноубл, Дж. (2021). Теория изменений за десять шагов. Фонд развития медиапроектов и социальных программ «Глэдвэй». Режим доступа: https://impact. ngo.ru/library/view/51 (дата доступа: 21.09.2022). 6. Mayne, J., Rist, R. (2006). Studies are not enough: the necessary transformation of evaluation. the Canadian Journal of Program Evaluation, 21(3), 93. 7. Шклярук, М. (2020). Применение теории изменений ускорит реализацию стратегий РФ. Российская Газета. Режим доступа: https://rg.ru/2020/06/11/ primenenie-teorii-izmenenij-uskorit-realizaciiu-strategij.html (дата доступа: 21.09.2022) 8. Ким, А., Копыток, В., Филиппова, Ю., Цыганков, М. (2020) Применение теории изменений для стратегического аудита и стратегического планирования в России. Москва: Счетная палата Российской Федерации, Центр перспективных управленческих решений. Режим доступа: https://ach.gov.ru/news/ kak-ispolzovat-teoriyu-izmeneniy-dlya-strategicheskogo-audita (дата доступа: 21.09.2022). 9. Кузьмин, А., Кошелева, Н. (2014). Теория изменений: общие рекомендации к применению (из опыта БДФ «Виктория»). Проспект. Режим доступа: https:// victoriacf.ru/wp-content/uploads/2012/12/909.pdf (дата доступа: 21.09.2022).

From A to B by a Proven Route

Theory of Change as a Tool for Impact Planning and Evaluation.

The theory of change became the mainstream for international development projects in the 1990s. The popularity of this design and evaluation tool in Russia is gradually growing. Its key value is a paradigm shift with respect to social change projects. Theory of change looks at causal mechanisms in achieving social outcomes through chosen actions. Read our article to find out how to make a project more reasonable and understandable for investors and implementers thanks to the theory of change.

Conceptualizing the concept: what exactly is a theory of change?

The theory of change as a concept emerged from the discussion of theoretically grounded practices of project evaluation. This methodology is inspired by the theory of social change as a grounded critical intervention in reality based on the principles of dialogue and equality. As defined by Ringhofer and Kohlweg: “Theory of change is a methodology for planning, management and evaluation of development projects and positive social change.” (Ringhofer & Kohlweg, 2019)

Theory of change as a methodology inherits as its principles a focus on development and empowerment in social change projects (Ibid). Key components of a theory of change include a description of social change, a set of activities to achieve the change, a description of immediate and intermediate effects, and conditions and assumptions for achieving the final impact.

Developed as a standalone methodology in the 1990s, theory of change has now become mainstream in the field of international development projects. Its key value is a paradigm shift with respect to social change projects. Up until the late 1990s, projects used to operate following the “black box” principle: resources and activities are fed into the system as inputs, and social results are achieved at the output in an unknown manner. The theory of change “unpacks” the black box and looks at causal mechanisms in achieving social outcomes through chosen actions. This makes the project more substantiated and more explicit in its content, and therefore more understandable to investors and implementers.

Related concepts: what similar tools exist

Along with the theory of change, there are a number of other tools that are occasionally presented as theory of change.

• A theory of change is a narrative description, usually accompanied by a graphic or visual breakdown of how and why a goal or result is expected to be achieved in a particular context. It establishes causal relationships between the elements of the project: what specific results can be expected if the activities are performed and the assumptions are correct.
• A logic model is a graphical or visual representation of a theory of change that illustrates the relationship between what a project will do and what it hopes to achieve.
• Logical framework (LogFrame) is a type of logic model presented in a table format that provides a simplified description of how the project should function, following the format of a linear chain of causes and effects.

 It is worth noting that the theory of change is not just a table or a flowchart, but a narrative text describing not only causal relationships from activities to results, but also indicating the prerequisites that need to be met in order to meet the assumptions about these or those relationships. The theory of change is characterized by a non-linear structure and the recognition that the success of a project depends not only on its implementers, but is also determined by other factors that need to be considered as well as the activities within the project.

Russian experience in the use of theory of change

An overview of the Russian experience related to the use of theory of change should begin with a story about the expert note “Application of the Theory of Change for Strategic Audit and Strategic Planning in Russia” by the Center for Advanced Management Solutions and the Accounts Chamber of the Russian Federation. An article by Maria Shklyaruk, General Director of the Center, published in Rossiyskaya Gazeta, describes the specifics of the first steps towards the use of theory of change at the federal level — this tool is being introduced as a way to link strategic goals and a list of activities needed to achieve those goals, with a separate focus on the socio-economic effect being achieved. The work cites, among others, an academic article by Carol Weiss, who is considered the author of the term “theory of change”, with a thesis that achieving social and economic effects requires a reasonable assumption about the implementation mechanisms (Shklyaruk, 2020).

By now the expert note of this collective of authors (Kim, Kopytok, 2020) seems to be the most reasonable and structured adaptation of the theory of change for the Russian context — at least for use in planning state programs. It is accompanied by practical examples of public administration, for example, the problem tree of a social contract project aimed at assisting job seekers. The tree “branches” go from a highlevel problem, such as a high level of poverty, down to the specific causes of the problem — say, ineffectiveness of the traditional social support measures for a number of social groups. A very important observation is made in the paragraph on measuring performance in the absence of the necessary data: here the authors spell out the strongest advantage of the theory of change approach to assessing change, which is that having a reasonable assumption about cause-and-effect relationships fills evidentiary gaps.

An example of the use of theory of change in Russia outside the public sector, which received wide coverage due to its mention in the first Russian-language manual on the topic, is the theory of change developed in 2010-2011 by the Victoria Children Foundation (Kuzmin, Kosheleva, 2014). The case is often referred to in a variety of workshops on developing a theory of change, such as webinars by Evolution and Philanthropy, Skolkovo Moscow School of Management: they emphasize the structure of the theory of change, pointing out the importance of formulating assumptions/ conditions and mapping results in reverse order. It is worth noting that in the Russian experience the theory of change is not substituted with a logical framework. Also, various Russian interpretations of this concept, which quote the Victoria Children Foundation as reference, contain the same set of elements of the theory of change: inputs, activities, outputs, outcomes, impact.

The principles of theory of change are also used in the Standard for Evidence-Based Social Practices in Childhood, developed with support from the Timchenko Foundation, the Center for Evidence-Based Social Design at Moscow State University of Psychology and Pedagogy, and the Presidential Grants Fund. The importance of these principles is that they show the indispensability of the theory of change for assessing social impact. In order to evaluate a project, it is necessary to have a prescribed theory of change in order to formulate the subject of measurement. A sociological article on subjective well-being change points out that the theory of change, which specifies activities and a chain of social outcomes (Archakova & Garifulina, 2020), is used to define “well-being.” It was noted earlier that the concept of well-being is key to measurement because it allows the involvement of target groups and positive changes in well-being are the ultimate goal of any social projects.

Moreover, the monitoring and evaluation tools described in the standard, which involve a variety of data from different sources, can be included in the project at the planning stage, and the easiest way to do this is to correlate elements of the theory of change to their corresponding indicators and research methods. As the aforementioned authors write, theory of change helps operationalize the concept being measured, which allows us to formulate the means of evaluation.

The popularity of the theory of change as a design and evaluation tool in Russia is growing gradually. Some grantmaking organizations, such as the Toward Change Foundation and The Way Home Foundation, are implementing the theory of change into their practice of submitting grant proposals, accompanied by educational programs that allow applicants to become familiar with this tool of project work.

However, there is no widespread practice of implementation yet. In particular, as a study of foreign and Russian experience in evaluating NGO project activities shows¹, the Presidential Grants Fund, which is currently the largest entity financing social projects in the country, does not yet see the prospects and opportunities for introducing the theory of change, as well as requirements to evaluate social effects and impact for its grantees, believing that it would significantly complicate the procedure for issuing and receiving grants. In general, the application of the theory of change in Russia at this stage is an exception, rather than a general standard or rule. This is largely due to the labor intensity of its implementation, including the lack of appropriate digital tools to simplify the task, as well as the general lack of information on the terms and procedures for developing a theory of change. It is worth noting that the first methodological handbook on developing a theory of change in Russian was not published until 2021.

1. A study of modern foreign and Russian experience in evaluating the project activities of non-profit organizations (2020). Retrieved from: https://impact.ngo.ru/library/view/50 (accessed: 21.09.2022) (In Russian).

Interestingly, in a collection of English-language articles on the use of the theory of change in world practice, this approach is characterized as “trendy, over-used ... methodology” (Vun, 2021). This vividly demonstrates the gap in approaches used in social change projects. On the one hand, catch-up development makes it possible to avoid the problems of growth: late introduction of the technology makes it possible to avoid the mistakes of an earlier version. Such errors in the context of the theory of change include the lack of implementation of monitoring and evaluation practices, as well as the lack of involvement of the affected players. On the other hand, years and even decades have passed since the weaknesses of the methodology have been addressed, and the use of the methodology in Russia remains at an initial level without any counterpart being present.

Structure of the theory of change: an example of the theory of positive change

Based on the reviewed sources, it is possible to isolate the unchangeable elements of the theory of change and add to them the elements of assessment and involvement, adapted to the Russian context. This is how the “Theory of Positive Change” developed by the Factory² came about, which can be distinguished from other approaches to creating a theory of change. The advantage of this approach is that it emphasizes the conditions and assumptions, which results in a theory of change rather than a logical model. Indicators of elements in the results map are an indispensable element of the Theory of Positive Change: not only do they allow you to clarify the subject of social change, but also to build the necessary channels of communication with target audiences, which is necessary for their involvement. Complementing the traditional approach, the Theory of Positive Change includes two additional blocks for calculating the index of evidence and the index of validity. The first indicates the properties of the monitoring and evaluation model, the second describes the sources of justification for judgments about the planned changes. In addition, the model is supplemented by economic calculations — current liquidity, financial stability and profitability of sales for projects that involve a mechanism of financial sustainability through the sale of goods/services (i.e. social entrepreneurship).

2. The Positive Changes Factory is a platform for creating and developing positive change projects in various areas of human activity and society, which develops scientific and practical approaches in this area. Read more at www.positive-changes.ru

The phrase “positive change” in the name of the approach refers to the notion of impact as a social change resulting from a development project. The Theory of Positive Change uses accepted vocabulary in Russia (for example, from the Presidential Grants Fund’s Grant Application Rules3 and the aforementioned Standard for Evidence-Based Social Practices) and constructs it as elements of Theory of Positive Change, which are taken in particular from the manual “Theory of Change in Ten Steps” by James Noble (2019) and publications by John Mayne (2006). Currently, the Theory of Positive Change is included in the model for evaluating social enterprise projects, which is planned for implementation by the Social Projects Support Fund, a federal structure that develops the environment for social projects and social entrepreneurship in Russia.

The Theory of Positive Change consists of two blocks. The first is a problem tree describing the current situation, the target audience, and the target audience’s problem in the context of the situation that requires positive change. The second block is a positive change map — an outline of project results, aligned with the chain of social results from activities through outcomes and effects toward the social impact as the final destination point.

Problem tree

• The situation is characterized by objective indicators based on verified data sources, specifying geographic and temporal dimensions.
• Target audiences are described similarly, with specific characteristics and qualities that make that audience special. As stakeholder engagement practices, a communication channel should be prescribed to gather feedback for each target audience — this is important for defining project goals, visualize impact, and social change indicators.
• A problem is a part of reality that is to be changed by the project, which is formulated as detailed definition of the project framework (temporal, geographical and socio-demographic).
• The causes of the problem are the link between the problem and the social effects that the project is supposed to achieve. The problem is assumed to be a sufficiently abstract category, which can be detailed through the consideration of its causes to be addressed.

Positive change map

The Positive Change Map consists of a bottom-up chain of results that will positively change the problem situation and a specific part of the target audience’s life.

Each link in the chain of results, as required by the standard for evidence-based social practices, is accompanied by indicators — an objective indicator of the degree of achievement of the stated goal. Transitions from outcomes to social effects and from social effects to social impact require justification — what specific materials justify the assumption that causality works in this specific way. Conditions and assumptions are also a must for every element of the positive change map. They describe under what circumstances the specified causal relationship is assumed.

• An activity is the very beginning of the social impact chain, what the project does, its activities.
• Immediate results are what the activity is aimed at. It is worth noting that performing an activity is not in itself a result. Conducting an event is not the result of the event, but simply an indicator of the activity. The results are the new qualities acquired by the target audience as a result of the activity.
• Social effects are the short- and medium-term effects of results given the conditions and prerequisites are met, lasting changes in the lives of target audiences.
• Impact is the long-term effects of social effects given the conditions and prerequisites are met. It is the connection between the project and the problem posed — what exactly the project contributes to solving it, how that contribution is measured, and what proves that it can happen.

 The outcome of the Theory of Positive Change is a coherent map of results aimed at solving problems and their causes from the problem tree, with the respective indicators, rationales for logical relationships, and causal assumptions. A logical framework for the Theory of Positive Change methodology is presented below.

By the end of 2022, the Theory of Positive Change developed by the Factory will be available as an open online tool, enabling more projects to plan and evaluate social impact.

Conclusion

The theory of change is a tool for developing and managing positive social change projects. The methodology, first mentioned in 1997, according to its own principles, is in the process of continuous development. Over the past 20 years, the project documentation on the theory of change model has become a mandatory requirement for both impact investment and systematic evaluation of the social results achieved. In Russia, theory of change is just starting to be implemented and used as a basis for social impact. The Theory of Positive Change is presented as one of the steps toward the implementation of the theory of change methodology in Russia. An important factor in the dissemination of this tool, in our opinion, will be the creation of an easily accessible and convenient online tool for completing and visualizing the path from A to B — towards achieving greater impact of the project.

Ivan Smekalin, analyst, Positive Changes Factory

References: 1. Ringhofer, L., Kohlweg, K. (2019). Has the Theory of Change established itself as the better alternative to the Logical Framework Approach in development cooperation programmes? Progress in Development Studies, 19(2), 112-122. https://doi.org/10.1177/1464993418822882. 2. Archakova, T, Garifulina, E. (2020). Measuring Сhildren’s Subjective Well-Being in Russia: Local Practices and Federal Strategies. Monitoring of Public Opinion: Economic and Social Changes, 1, 276-295. https://doi.org/10.14515/ monitoring.2020.1.11. 3. Vun, G. (2021). Analysing the Credibility of Theories of Change. In Theories of Change, 41-49. Springer, Cham. https://doi.org/10.1007/978-3-030-52275-9_3. 4. Noble, J. (2019). Theory of change in ten steps. London: New Philanthropy Capital. Retrieved from https:// www. thinknpc. org/resource-hub/ten-steps (accessed: 21.09.2022). 5. Noble, J. (2021). Theory of Change in Ten Steps. Gladway Foundation. Retrieved from: https://impact.ngo.ru/library/ view/51 (accessed: 21.09.2022). 6. Mayne, J., Rist, R. (2006). Studies are not enough: The necessary transformation of evaluation. The Canadian Journal of Program Evaluation, 21(3), 93. 7. Shklyaruk, M. (2020). Application of Theory of Change to Accelerate the Implementation of Development Strategies in the Russian Federation. Rossiyskaya Gazeta. Retrieved from: https://rg.ru/2020/06/11/primenenie-teorii-izmenenijuskorit-realizaciiu-strategij.html (accessed: 21.09.2022). (In Russian). 8. Kim, A., Kopytok, V., Filippova, Yu., Tsygankov, M. (2020) Application of Theory of Change to Strategic Audit and Strategic Planning in Russia. Moscow: Accounts Chamber of the Russian Federation, Center for Advanced Management Solutions. Retrieved from: https://ach. gov.ru/news/kak-ispolzovat-teoriyu-izmeneniy-dlyastrategicheskogo-audita (accessed: 21.09.2022) (In Russian). 9. Kuzmin, A., Kosheleva, N. (2014). Theory of Change: General Recommendations for Application (from the experience of the Victoria Children Foundation). Prospekt. Retrieved from: https://victoriacf.ru/wp-content/uploads/2012/12/909.pdf (accessed: 21.09.2022).

DOI 10.55140/2782-5817-2022-2-3-46-55

Хочешь стать одним из более 100 000 пользователей, кто регулярно использует kiozk для получения новых знаний?
Не упусти главного с нашим telegram-каналом: https://kiozk.ru/s/voyrl