Теория изменений (Theory of Change)

Организация запускает программу обучения сотрудников, ожидая, что это приведёт к росту производительности — программа проходит успешно, участники довольны, а производительность не меняется. Проблема в том, что никто явно не сформулировал предположение, лежащее в основе логики: что именно должно произойти между "сотрудники обучены" и "производительность выросла", и что могло помешать этой связи сработать.

Формулировка Кэрол Вайс (в переводе редакции): «нет ничего практичнее хорошей теории» — программы всегда основаны на явных или неявных теориях о том, как и почему они сработают, и задача оценки — вскрыть эти теории и разложить их максимально подробно, назвав все допущения и подположения, встроенные в программу.

Происхождение и исследовательская база

Метод развит социологом Кэрол Вайс в статье «Nothing as Practical as Good Theory: Exploring Theory-Based Evaluation for Comprehensive Community Initiatives for Children and Families» (в сборнике под редакцией Джеймса Коннелла и др., «New Approaches to Evaluating Community Initiatives», Aspen Institute, 1995). Контекст статьи — конкретная практическая проблема конца 1980-х — начала 1990-х годов: комплексные межсекторные общественные инициативы для детей и семей (comprehensive community initiatives, CCI), финансируемые частными фондами, оказались крайне сложны для оценки обычными методами, потому что они одновременно воздействовали на много сфер жизни сообщества (жильё, здоровье, занятость, образование) через множество взаимосвязанных мероприятий. Вайс предложила: оценка должна вскрыть теорию, лежащую в основе программы — явную или неявную, — и разложить её максимально подробно, назвав все допущения и подположения. Это открывает «чёрный ящик» между вложенными ресурсами и итоговым эффектом: вместо вопроса «сработала ли программа в целом» появляется возможность спросить, какое именно звено цепочки не сработало и почему.

Как идею применяли на практике: Коннелл и Кубиш (1998): Джеймс Коннелл и Энн Кубиш («Applying a Theory of Change Approach to the Evaluation of Comprehensive Community Initiatives: Progress, Prospects, and Problems», в том же издании Aspen Institute, 1998) описали опыт применения подхода теории изменений к оценке CCI и три альтернативы, с которыми до этого сталкивалось поле: свести оценку к документированию процесса и резко снизить требования к доказательности эффекта; насильно «подогнать» комплексные инициативы под существующие методы оценки эффекта; либо отложить оценку до тех пор, пока инициативы не станут «зрелыми» для стандартных методов. Теория изменений предложила четвёртый путь — оценивать не только итоговый эффект, но и то, произошли ли промежуточные изменения, предсказанные теорией, и в предсказанном порядке. По их наблюдениям, поле извлекло практические уроки: финансирование должно быть гибким и долгосрочным; лидерство на местах критично важно, но формальные программы обучения лидеров плохо справляются с формированием кадрового резерва; техническая помощь «влетел, решил проблему, улетел» слабо укрепляет возможности сообщества; а оценки, ориентированные на широкие показатели фондов, часто не замечают менее заметных, но реальных позитивных изменений.

Различение «провала теории» и «провала реализации»: в теории оценки программ (Питер Росси, Марк Липси, Хауард Фримен, «Evaluation: A Systematic Approach», классический учебник, множество изданий с 1979 года; нами не читался, приводится по общепринятому в дисциплине различению) принято разделять два разных объяснения неудачи инициативы: «провал теории» (theory failure) — причинно-следственная логика программы сама была неверна, промежуточные звенья не ведут к результату даже при идеальном исполнении, — и «провал реализации» (implementation failure) — логика была верна, но программу выполнили не так, как задумано (не хватило ресурсов, охвата, качества). Теория изменений явно помогает различить эти два случая только тогда, когда индикаторы измеряют не только конечный эффект, но и каждое промежуточное звено цепочки: без этого невозможно понять, провалилась ли логика или исполнение.

Что показал обзор практики: Изабель Вогель (2012): Изабель Вогель по заказу Министерства международного развития Великобритании (DFID) подготовила «Review of the Use of 'Theory of Change' in International Development» (2012) — обзор на основе 40 интервью с сотрудниками 25 организаций (донорские агентства, международные НКО, исследовательские и обучающие организации). Ключевой вывод обзора: к 2012 году практически каждый крупный благотворительный фонд, госагентство, НКО и организация международного развития стали требовать теорию изменений в заявках на финансирование — метод стал фактическим стандартом; при этом теория изменений «может стать упражнением на соответствие требованиям (compliance exercise) и потерять значительную часть своей ценности», если её составляют один раз для донора и больше не открывают. Главная рекомендация обзора — держать метод гибким, а не предписанным жёстким шаблоном, и использовать его для реального критического осмысления, а не только как формальность в заявке. Оговорка: полный текст 86-страничного отчёта нами не читался, приводится по резюме и цитируемым фрагментам.

Ключевые идеи и принципы

1. Принцип: Цепочка от ресурсов к долгосрочному эффекту

   Теория изменений выстраивает явную последовательность: ресурсы и действия → непосредственные результаты (outputs) → промежуточные изменения (outcomes) → долгосрочный эффект (impact) — каждый переход между уровнями должен быть логически обоснован, а не просто предполагаться.

2. Принцип: Явная формулировка допущений

   Для каждой связи в цепочке формулируется явное предположение о том, почему один уровень должен привести к следующему — например, "обучение приведёт к росту производительности, ЕСЛИ у сотрудников уже есть мотивация применять новые навыки и достаточно времени для практики". Именно эти предположения чаще всего оказываются ложными и объясняют провал инициатив.

3. Принцип: Тестируемость логики

   Хорошо построенная теория изменений позволяет заранее определить, какие индикаторы подтвердят или опровергнут каждое звено цепочки — это превращает реализацию инициативы в проверяемый эксперимент, а не в акт веры.

Ограничения, слепые зоны и критика

Типовые ошибки

1. Ошибка 1: допущения остаются неявными.

   Команда формулирует цепочку "действие → результат", но не проговаривает, при каких условиях эта связь действительно сработает — когда инициатива проваливается, непонятно, какое именно предположение оказалось ложным.

   Как избежать

   Явно формулировать предположение для каждого перехода в цепочке и продумывать, как его можно проверить.

2. Ошибка 2: теория изменений строится один раз и никогда не пересматривается.

   Первоначальная логика фиксируется на старте проекта и не корректируется, даже когда практика показывает, что реальные причинно-следственные связи отличаются от предполагаемых.

   Как избежать

   Регулярно сверять теорию изменений с фактическими результатами и корректировать логику по мере накопления данных.

3. Ошибка 3: теория изменений подменяется простой логической моделью «вход-выход».

   Цепочка ограничивается прямой связкой «действие → результат» без явно выделенных промежуточных изменений и без обоснования, почему одно должно привести к другому — теряется именно то, что отличает теорию изменений от обычной логической модели.

   Как избежать

   явно выделять промежуточные изменения как отдельное звено цепочки, не ограничиваясь прямой связкой «действие → результат».

4. Ошибка 4: для допущений не определены индикаторы проверки.

   Допущение сформулировано, но остаётся декларацией — заранее не определено, какие данные подтвердят или опровергнут его на практике, поэтому теорию изменений невозможно протестировать.

   Как избежать

   для каждого ключевого допущения заранее определять конкретный измеримый индикатор, по которому можно будет судить, сработало оно или нет.

5. Ошибка 5: теория изменений строится в одиночку, без участия ключевых стейкхолдеров.

   Цепочку допущений составляет один человек (обычно инициатор или руководитель программы) — участники реализации и благополучатели программы узнают о логике уже постфактум, хотя именно они часто лучше понимают реальные причинно-следственные связи на местах.

   Как избежать

   обсуждать и уточнять цепочку допущений совместно с ключевыми участниками реализации и, где возможно, с благополучателями программы.

6. Ошибка 6: не различают провал логики и провал исполнения.

   Инициатива не дала эффекта, и это automatически трактуют как ошибку в самой теории («наша идея была неверна»), хотя причина может быть в исполнении (не хватило охвата, ресурсов, качества) — либо наоборот, слабое исполнение списывают на «нежизнеспособную идею». Без индикаторов на каждом промежуточном звене эти два случая неотличимы (различение «провала теории» и «провала реализации» в классической методологии оценки программ).

   Как избежать

   для каждого звена цепочки фиксировать не только итоговый эффект, но и то, реализовано ли само действие в задуманном объёме и качестве, прежде чем делать вывод о верности логики.

План внедрения

1. Неделя 1: формулировка долгосрочного эффекта

   сформулировать желаемый долгосрочный эффект инициативы.

2. Неделя 2: построение цепочки

   выстроить цепочку от ресурсов и действий к этому эффекту через промежуточные результаты.

3. Неделя 3: формулировка допущений

   явно сформулировать допущение для каждого перехода в цепочке.

4. Неделя 4: определение индикаторов

   определить индикаторы, которые подтвердят или опровергнут каждое допущение.

5. Далее: регулярная сверка с реальностью

   Далее: регулярно сверять реальные результаты с теорией и корректировать логику.

Как реализовать этот план с помощью фрейма «Теория изменений» в OrgDevTools

Фрейм устроен как четыре карточки со свободным списком записей на каждой — «Ресурсы и действия», «Промежуточные изменения», «Долгосрочный эффект», «Допущения» — прямо соответствующие цепочке из блока «Ключевые идеи».

Соответствие плану: неделя 1 (формулировка долгосрочного эффекта) — карточка «Долгосрочный эффект»; неделя 2 (построение цепочки) — карточки «Ресурсы и действия» и «Промежуточные изменения», разделённые структурно так, что нельзя свести теорию к прямой связке «действие → результат» (защита от ошибки 3); неделя 3 (формулировка допущений) — карточка «Допущения» с подсказкой «что должно быть верно, чтобы каждый переход сработал» (защита от ошибки 1). Кнопка создания задачи по умолчанию формирует задачу «Проверить допущение цепочки изменений».

Технически все карточки — обычные списки текста, а вердикт вкладки «Итоги» — стандартный равновесный: он показывает, сколько из четырёх карточек заполнено и какая насыщеннее, и добавляет вводную фразу («теория изменений работает, если цепочка от ресурсов через промежуточные изменения к долгосрочному эффекту логически связана, а явные допущения на каждом переходе названы, не подразумеваются»). У фрейма нет отдельного поля для индикаторов проверки допущений (неделя 4 плана внедрения) и нет поля для регулярной сверки с реальностью («Далее») — эти шаги ведутся вне фрейма. Фрейм также не проверяет, действительно ли записи в «Допущениях» привязаны к конкретным переходам цепочки, и не различает провал логики от провала исполнения (Ошибка 6) — вся эта дисциплина остаётся на команде.

Книги по теме

Вайс К. — «Nothing as Practical as Good Theory» (1995). Первоисточник метода теории изменений для оценки программ.

Коннелл Дж., Кубиш Э. — «Applying a Theory of Change Approach to the Evaluation of Comprehensive Community Initiatives» (Aspen Institute, 1998). Практическое применение подхода к оценке комплексных общественных инициатив.

Вогель И. — «Review of the Use of 'Theory of Change' in International Development» (DFID, 2012). Обзор практики применения на основе 40 интервью с 25 организациями.

Росси П., Липси М., Фримен Х. — «Evaluation: A Systematic Approach» (классический учебник оценки программ). Различение провала теории и провала реализации.