Оценка воздействия результатов оценки

В сообществе XCEval (значительно более 1000 подписчиков по всему миру) сейчас обсуждается свежая публикация EVALSDGs*, название которой по смыслу можно перевести как «Руководство по проведению оценки, следующей за оценкой» («Follow-up Evaluation Guidance»).

Автор (Denis Jobin) указывает на то, что мало отслеживать лишь выполнение рекомендаций, содержащихся в отчете о проведении внешней оценки (это отслеживание - вопрос внутреннего управленческого контроля). По мнению автора, нужно еще уделить внимание тому, каковы результаты внедрения этих рекомендаций. А для этого надо провести внешнюю оценку использования результатов внешней оценки.

Приведу определение такой оценки (будем называть её «последующей») из упомянутого руководства: 

«Последующая оценка представляет собой систематический и независимый ассесмент (assessment) того, были ли реализованы рекомендации и согласованные действия, полученные в ходе предыдущей оценки, были ли они достаточны для устранения первоначальных проблем и их коренных причин, а также способствовали ли они улучшению политики, программ, систем, процесса принятия решений или результатов.

Она отличается от рутинного отслеживания реакции менеджмента на результаты внешней оценки. Отслеживание реакции обычно заключается в проверке того, были ли выполнены согласованные по итогам оценки действия. Последующая (внешняя – АК) оценка задает более глубокий оценочный вопрос: привели ли предпринятые действия к результату, устранили ли первоначальную проблему и снизили ли связанные с ней риски?».

Как вам такая идея? Если «прокатит», то у внешних оценщиков в системе ООН появятся дополнительные заказы. Но что-то мне подсказывает, что менеджеры и руководители программ могут быть не в восторге от такого нововведения.

*EVALSDGs — это сеть заинтересованных и квалифицированных политиков, учреждений и практиков, которые отстаивают важнейшую роль оценки в достижении Целей устойчивого развития. 

PS Почему-то на платформе Blogspot проблемы с загрузкой картинок. Потому сегодня пост без иллюстрации.

Руководство по практическому применению искусственного интеллекта в оценке

В открытом доступе размещено руководство по внедрению ИИ в деятельность по оценке программ и проектов социальной направлденности (на английском языке). Документ призывает оценивать ИИ-инструменты на предмет прозрачности, конфиденциальности и минимизации предвзятости, а также открыто обсуждать их использование со стейкхолдерами. Практическое руководство охватывает весь цикл оценки — от анализа данных до отчетности — с обязательным контролем со стороны человека. Как «бета-версия», этот документ призван стимулировать ответственные эксперименты и непрерывное обучение для повышения эффективности и инклюзивности оценки. Ознакомиться с полным текстом можно на сайте CGIAR.

CGIAR (Консультативная группа по международным сельскохозяйственным исследованиям) — это крупнейшее в мире глобальное партнерство в области продовольственной безопасности, объединяющее 15 международных исследовательских центров. Организация занимается борьбой с голодом и бедностью в развивающихся странах, разрабатывая инновационные аграрные технологии, устойчивые к климатическим изменениям сорта культур и методы управления природными ресурсами. 

Критическая системная эвристика: время пришло

В оригинале этот метод, предложенный щвейцарцем Вернером Ульрихом, называется Critical Systems Heuristics (CSH). Автор определяет CSH как структуру для рефлексивной практики, основанную на практической философии и системном мышлении. Цель CSH - поддержать систематические усилия по критическому анализу суждений о границах. Интересующиеся могут найти подробные описания CSH на сайте автора (англ.) или в книжке Джексон, Майкл С. Системное мышление: Творческий холизм для менеджеров, опубликованной Томским государственным университетом и размещенной в открытом доступе.

Я познакомился с CSH на одном из семинаров перед конференцией Американской ассоциации оценки (American Evaluation Association / AEA) в тот момент, когда мы занимались созданием системы для оценки предпринимательского потенциала университета. И как-то показался очень органичным этот подход для решения проблем, с которыми мы столкнулись в нашей работе. Настолько откликнулось, что на следующий год мы даже выступили на конференции АЕА и поделились практическим опытом использования CSH.  

После этого в течение 10 лет не было случая представить CSH в России и обсудить его с коллегами.  Но вот в конце 2024 года на сессии по оценке системных изменений в Институте оценки, который мы проводили в партнерстве с новосибирским ИнА-Центром, решил я представить CSH участникам. Включил несколько слайдов в презентацию и… не хватило времени на них. 

Наконец, в рамках онлайнового курса по системному мышлению, который мы с ИнА-Центром сейчас проводим, удалось выделить достаточно времени и даже предложить участникам поэкспериментировать с использованием этого инструмента в формате домашнего задания. Получилось интересно, но возникло достаточно много вопросов. Честно говоря, метод не так уж прост, а его освоение требует некоторых усилий и определенного упорства 😊 Так вот, во вторник (позавчера) участники семинара обменялись полученным опытом, обсудили возникшие вопросы и ответы на них. А в среду, то есть вчера, я вдруг получил письмо от моего давнего знакомого Боба Вильямса из Новой Зеландии о том, что он опубликовал книгу по… Критической системной эвристике! Её можно найти здесь. В качестве иллюстрации сегодня привожу обложку этой книги. Называется "Ценности в действии".

Поскольку такие совпадения не бывают случайными, я решил, что обо всем этом надо написать в блоге 😊, т.к. пришло время.

Самые популярные публикации в блоге в 2024 году и планы на 2025

Самыми популярными и получившими наибольшее число положительных реакций оказались следующие: 

• Системные изменения и их оценка 
• Теория уязвимости 
• Чек-лист для анкеты 

Все три темы планирую развивать в следующем году:

• С новосибирским ИнАЦентром готовим онлайновый семинар по системному мышлению. 
• С БФ «Абсолют-Помощь» продолжим обсуждать теорию уязвимости и возможные совместные публикации. Тема интересная и важная!
• Обязательно сделаю новый вариант чек-листа для анкеты.

Читателей блога от всей души поздравляю с наступающим Новым годом! Картинку сгенерировал с помощью нейросети «Шедеврум». 

Учебники по искусственному интеллекту для школьников

Завтра на клубе PROОЦЕНКУ будем обсуждать использование искусственного интеллекта. Можно еще зарегистрироваться, кстати. О результатах обсуждения напишу сразу же.

А сегодня такая вот новость: "В России выпустили первые учебные пособия "Искусственный интеллект" для 5-9 классов, которые включают цифровое дополнение с сервисами генеративного искусственного интеллекта GigaChat и Kandinsky и соответствуют федеральной рабочей программе одноимённого курса по внеурочной деятельности". Говорят, что в помощь учителям "Просвещение" готовит бесплатный мини-курс.

Чем может быть полезен дайджест

Сегодня у меня спросили, чем может быть полезен дайджест «Системные изменения в благотворительных организациях», опубликованный на днях Центром развития филантропии Фонда Потанина.

Дайджест содержит много идей, которые могут быть полезны как в плане организационного развития самих НКО, так и в плане развития деятельности НКО и их воздействия на окружение. К дайджесту следует отнестись как к ресурсу, в котором какие-то мысли, модели, схемы могут оказаться созвучны тому, с чем имеет дело та или иная организация. Надо обращать внимание, в первую очередь, именно на то, что «откликается» сейчас. Ну и, конечно, взять на заметку то, что может пригодиться в перспективе. Дайджест по жанру ни в коем случае не претендует на сколько-нибудь развернутое описание. Он содержит лишь краткие обзоры либо основные положения значимых публикаций, связанных с системными изменениями в организациях вообще и в благотворительных организациях в частности. Соответственно, можно рассматривать дайджест и как некое собрание «точек входа», позволяющих перейти к более детальному изучению заинтересовавших читателя вопросов.

Новый номер журнала «Позитивные изменения»

Вышел в свет новый номер журнала «Позитивные изменения». Как всегда, интересное интервью от главного редактора Натальи Гладких в рубрике «Гость номера» и много разнообразных материалов по социальному проектированию, социальному предпринимательству и оценке социальных проектов. Наша с Владимиром Балакиревым статья называется «Я люблю свою работу». В ней, как и планировалось, мы рассказали о том, как системное внедрение оценки в НКО может позитивно повлиять на корпоративное благополучие сотрудников. Статья написана по мотивам нашего с Владимиром выступления на прошлой конференции АСОПП. 

Новый номер журнала здесь.

Наша статья здесь.

Деколонизация оценки

Колонизация – это выделение поселений или основание новых поселений на чужой территории либо заселение и освоение своих окраинных земель (внутренняя колонизация). Соответственно, деколонизация – это превращение колониальных и зависимых территорий в свободные и независимые государства.

В последние годы много говорят и пишут о деколонизации науки. При желании можно найти много публикаций на эту тему в рунете (например, здесь). Одна из основных целей деколонизации науки - признание и устранение неравенств, которые возникают в результате колониального наследия. Колониальная наука часто приводила к маргинализации знаний и практик коренных народов, подавлению альтернативных мировоззрений и установлению гегемонии западной науки.  Деколонизация науки предполагает критический анализ научной методологии и признание в качестве научных традиционных способов познания и критериев доказательности. Деколонизация науки также ориентирована на диверсификацию академических сообществ. 

Не остались в стороне и специалисты по оценке. В прошлом году вышел в свет специальный выпуск Журнала мультидисплинарной оценки (Journal of MultiDisciplinary Evaluation), посвященный деколонизации оценки. Деколонизация – одно из приоритетных направлений деятельности Международной академии оценки (International Evaluation Academy), которая приняла самое активное участие в подготовке этой публикации. 

Общая направленность деколонизации оценки примерно такая же, как в науке. Оценка в том виде, как она сегодня есть, родилась и развивалась на западе при полном игнорировании традиций коренных народов. Это надо менять, считают сторонники деколонизации оценки, и бросают вызов широко известным и общепринятым подходам к проведению оценки – от постановки задачи и выбора методов получения знаний до представления результатов оценки и их визуализации. 

Вначале я хотел озаглавить эту публикацию так: «Надо ли нам деколонизировать оценку в России?», но потом решил, что лучше закончить этим вопросом. Тут есть, о чем подумать.

Рефрейминг организаций

Ли Болман и Теренс Дил предложили интересный подход к анализу организаций. На картинке – обложка 7-го (!) издания их книги, которое можно буквально перевести как «Рефрейминг организаций» ((Bolman, L. G., & Deal, T. E. (2021). Reframing organizations: artistry, choice, and leadership (Seventh Edition. ed.). Jossey-Bass.). 

Центральная идея этого подхода – использование для анализа четырех разных «рамок» (frames). Соответственно, «рефрейминг» в данном случае – это смена «рамок» анализа для того, чтобы лучше понять организацию. С позиции системного мышления можно было бы назвать эти «рамки» ракурсами. 

В приведенной ниже таблице показано, как эти рамки работают.

Таблица позаимствована из этой презентации (перевод мой). 

Корпоративное благополучие и оценка в НКО

Сообщение с таким названием мы с Владимиром Балакиревым сделали на только что завершившейся конференции АСОПП. 

Корпоративным благополучием, благополучием сотрудников или благополучием на рабочем месте принято называть такое «состояние, при котором сотрудник успешно реализует собственный потенциал, продуктивно работает и вносит свой вклад в развитие компании и общества в целом» (Лисовская, А. Ю., Кошелева, С. В., Соколов, Д. Н., & Денисов, А. Ф. (2021). Основные подходы к пониманию благополучия сотрудника: от теории к практике. Организационная психология, 11(1), 93-112).

Один из вариантов «драйверов корпоративного благополучия» выглядит так: 

1. Достижения: «Я достигаю большинства своих целей на работе»
2. Принятие: «На работе есть люди, которые ценят меня как личность»
3. Принадлежность: «Я чувствую принадлежность к своей компании»
4. Энергия: «При выполнении большинства рабочих задач я чувствую прилив энергии»
5. Справедливая оплата: «За мою работу мне платят справедливо»
6. Гибкость: «Моя работа допускает достаточную гибкость и по времени, и по месту»
7. Инклюзивность: «В моей рабочей среде чувствуется инклюзивность и уважение ко всем людям»
8. Социальная значимость: «Моя работа важна для решения социально-значимой задачи» 
9. Обучение: «Я постоянно чему-то учусь на работе»
10. Поддержка руководителя: «Мой руководитель помогает мне добиться успеха»
11. Поддержка коллег: «На работе есть люди, которые оказывают мне поддержку и воодушевляют меня»
12. Доверие: «Я могу доверять людям в моей компании»

Мы попытались показать, что полномасштабное внедрение оценки в деятельность НКО может существенным образом положительно повлиять на некоторые из этих драйверов, то есть, на благополучие сотрудников НКО.

Например, оценка/само-оценивание в НКО может способствовать ощущению достижения (драйвер №1), поскольку чаще всего одной из задач оценки является вынесение обоснованного суждения о достижении целей программы или проекта. 

Другой пример – обучение (драйвер №9). Каждый раз, проводя оценку, сотрудники НКО узнают что-то новое, учатся. Отсюда – связь оценки с обучением. 

Мы планируем опубликовать статью на эту тему в начале следующего года.

Прогностическая оценка

В 2007 году в журнале «Мультидисциплинарная оценка» была опубликована статья Майкла Скривена «Прогностическая оценка» (Predictive Evaluation).   Речь в ней шла о том, что во многих видах оценки (если не во всех) есть прогностическая составляющая. Скривен даже прикинул её масштабы в процентах. Оценка проектов и программ, по его мнению, прогностическая на 30%: почти во всех случаях она включает вынесение суждения об устойчивости деятельности и/или ее результатов. Устойчивость – это про будущее. Оценка политик (по Скривену) прогностическая на 75%, а оценка заявок (оценка замыслов проектов или программ) – на 100%, то есть представляет собой прогноз в чистом виде. При этом, по мнению Скривена, «прогнозирование — очень сложное дело, а оценщики обычно плохо разбираются в литературе по этому вопросу». Он указывает, что «мы слишком быстро перескакиваем от данных о прошлом к рассуждениям об будущем».

Статья была опубликована в рубрике «Информация к размышлению», и основной её пафос состоял в том, что надо развивать методологию прогностической оценки и соответствующие компетенции специалистов по оценке. Заметим, что речь здесь идет о специалистах, занимающихся преимущественно оценкой проектов и программ (program and project evaluation). Исторически сложилось так, что их профессиональная деятельность связана преимущественно со сбором и анализом эмпирических данных, характеризующих ход и результаты оцениваемых инициатив. Прогностическая же оценка развивалась в смежных областях.

Экологи, например, уже очень давно проводят ОВОС – прогностическую оценку воздействия на окружающую среду.

Специалисты по грантмейкингу на протяжении десятилетий отрабатывают методологию оценки заявок в рамкахгрантовых конкурсов  и - более широко – методологию оценки замысла проекта Самая свежая отечественная разработка в этой сфере -  «Методика оценки решений с учетом социальной значимости» Фонда «Вклад в будущее», представленная вчера на конференции Форума Доноров в Москве.

Специалисты по ассесменту социального воздействия (social impact assessment) занимаются преимущественно прогностической оценкой, указывая, что, в принципе, их методы и инструменты могут применяться и для программ на стадии реализации. Крупнейшее профессиональное объединение таких специалистов IAIA (International Association for Impact Assessment) проводит ежегодные конференции и выпускает журнал, название которого можно перевести как «Прогнозирование влияния и оценка замысла проекта».

Специалисты по оценке регулирующего воздействия (ОРВ) занимаются экспертизой (прогностической оценкой) новых законодательных актов во избежание создания избыточных издержек и административных барьеров для субъектов предпринимательской деятельности.

Специалисты по корпоративному обучению разрабатывают прогностическую оценку тренингов Обложка книги об этом использована в качестве иллюстрации.

И это лишь несколько примеров. Ресурсы для профессионального развития в сфере прогностической оценки точно имеются. 

Как «подстелить соломку»: оценка и управление рисками в социальном проектировании

Статья с таким названием опубликована в очередном номере журнала «Позитивные изменения». В ней - в числе прочего - приводятся результаты обсуждения на заседании клуба PROОЦЕНКУ, посвященного оценке рисков. 

Как всегда, в новом номере журнала много интересных материалов об оценке и не только!

Трудности при проведении мониторинга и оценки: зарубежный опыт

Разговор на клубе PROоценку сегодня получился интересный. Видеозапись и материалы будут доступны на сайте клуба в ближайшие дни. Пока хотел бы поделиться некоторыми зарубежными материалами по теме заседания. Все три публикации есть в открытом доступе (см. ссылки на источники).

Препятствия, влияющие на эффективный мониторинг и оценку проектов снижения бедности (на основании интервью с социальными работниками и специалистами по развитию сообществ):

• Навыки в сфере мониторинга и оценки. Знания в сфере мониторинга и оценки.
• Потенциал сотрудников в сфере МиО. Недостаточно специалистов, прошедших профессиональную подготовку.
• Мониторинг как проверка на соответствие. Выполняется формально на основе чек-листов («пункт-галочка»).
• Неэффективная работа со стейкхолдерами. Отсутствие поддержки со стороны благополучателей.       Источник

В каких сферах возникают проблемы при оценке проектов и программ в сельской местности (на основе интервью с менеджерами):

• Измерение результатов
• Оценка профилактических инициатив и демонстрация того, что негативный результат «не случился»
• Многофакторный характер проблем со здоровьем
• Разнообразие секторов и заинтересованных сторон, участвующих в программах
• Определение эффективности стратегий воздействия
• Проблемы доступа к благополучателям, характерные для сель
  ских сообществ
• Защищенные группы населения
• Отсутствие методов и инструментов оценки, предназначенных для использования в сельской местности.    Источник

Проблемы, с которыми сталкиваются НКО в сфере мониторинга и оценки (МиО):

• Нехватка ресурсов и времени
• Неточные данные
• Неэффективные стратегии МиО
• Использование стандартных моделей для всех программ
• Вовлечение заинтересованных сторон
• Информирование доноров об отрицательных результатах
• Техническая экспертиза в сфере МиО
• Культура/установки по отношению к МиО в организации
• Отсутствие фокуса (приоритизации)    Источник

Специальный выпуск журнала «Позитивные изменения»

Вышел в свет очередной номер журнала «Позитивные изменения» (Том 3, № 1). Он целиком посвящен оценке. 

Номер открывается большим интервью с Майклом Пэттоном. Беседует с гуру Наталья Гладких, главный редактор журнала. В интервью затрагиваются многие важные вопросы. В частности, обсуждаются компетенции специалистов по оценке. Майкл считает, что «сегодня оценка — это не только методики, но еще и межличностные отношения. Оценщики должны уметь хорошо слушать, уметь работать с людьми, принадлежащими к разным культурам, хорошо коммуницировать, устанавливать связи, решать проблемы и управлять конфликтами». 

Моя статья называется «Сделай сам»: как НКО оценивать проекты своими силами». В ней обсуждаются причины появления и особенности развития внутренней оценки и само-оценивания за рубежом и в России, а также приводятся принципы само-оценивания с рекомендациями по их практическому применению в деятельности НКО.  

Ниже - оглавление номера с указанием основных рубрик. Много интересного! Можно скачивать в формате PDF отдельные статьи, а можно - весь номер целиком. 

ГОСТЬ  НОМЕРА

• «Если ты используешь оценку, то принимаешь решения лучше и помогаешь людям больше». Интервью с Майклом Пэттоном (Наталья Гладких) 

ЭКСПЕРТНЫЕ МНЕНИЯ

• Без стандартов, но по призванию. Является ли оценка проектов и программ профессией? (Юлия Вяткина)  
• Оценка в настоящем и будущем:  взгляд грантодающих организаций (Ирина Ефремова-Гарт, Татьяна Печегина)

ЭКСПЕРТНЫЕ СТАТЬИ

• «Сделай сам»: как НКО оценивать проекты своими силами (Алексей Кузьмин)  
• Союз дела и денег.  Оценка экономической устойчивости проектов  в области социального предпринимательства (Елена Авраменко)
• Законным путем. Оценка фактического воздействия в части социальных инвестиций в России и мире (Иван Смекалин)

КЕЙС ВЫПУСКА 

• Как устроен лучший грантовый конкурс социальных проектов 2022 года. Опыт фонда «Дорога к дому» (Алена Богомолова)

ИССЛЕДОВАНИЯ 

• Сила спорта. Оценка проектов в сфере физической культуры  и массового спорта (Илья Солнцев, Наталья Кошелева)  

Книга из блога

К онлайновым сервисам привыкаешь настолько, что перестаешь задумываться о том, не следует ли сохранить информацию где-то у себя. Так произошло у меня с блогом, куда пишу в последние годы почти каждую неделю. Текст набираю в онлайне, копии не сохраняю. За 14 лет накопилось довольно много публикаций. Сегодня обнаружил целый ряд онлайновых сервисов, позволяющих за считаные минуты и небольшие деньги конвертировать блог в книгу в формате PDF. Теперь у меня такая книжка есть, вернее даже две книжки, поскольку в период с 2008 по 2011 я пользовался платформой LiveJournal, а затем "переехал" на Blogger. Все публикации за период с 2008 по 2011 уместились на 180 страницах с картинками и ссылками, а за период с 2012 по 2022 - на 420 страницах. Естественно, это я для себя сделал, в первую очередь. Но, если вдруг кому-то такая книга интересна, дайте знать. 

С удовольствием рекомендую сервис, которым я воспользовался. Он называется BlogBooker. На картинке - платформы, с которыми он работает. 

Узбекистан внедряет бюджетирование, ориентированное на результат

Информационно-аналитический портал REVIEW.UZ журнала "Экономическое обозрение" опубликовал вчера статью "Программное бюджетирование". Материал подготовлен специалистом Института бюджетно-налоговых исследований при Министерстве финансов Узбекистана Бунёджоном Кобиловом. Автор приводит краткий обзор зарубежного опыта бюджетирования, ориентированного на результат (Южная Корея, Франция и Казахстан), и обсуждает перспективы использования этого подхода в Узбекистане .

Вот преамбула к статье: "Внедрение в республике новой системы формирования годового бюджета — "бюджета, ориентированного на результат", — является одной из важнейших целей "Стратегии совершенствования системы управления государственными финансами Республики Узбекистан на 2020-2024 годы", предусматривающей внедрение системы целевого планирования с определением индикаторов эффективности бюджетных расходов всех министерств и ведомств при формировании проекта Государственного бюджета на 2022 год".

Полагаю, можно прогнозировать повышение интереса к сфере оценки программ в Узбекистане в ближайшее время. В первую очередь, речь, конечно, пойдет об индикаторах. Затем наверняка проявятся ограничения индикаторной оценки, и встанет вопрос о других подходах. Возможно, коллеги в Узбекистане, обратятся и к опыту Южной Кореи, где, как следует из упомянутой выше статьи, внедрены "самооценивание бюджетных программ" (2005) и "углубленная оценка бюджетных программ" (2006).

Профессионализация оценки

Непростая и интересная тема. Вчера обсудили на конференции АСОПП-2021. Моя презентация здесь. Хотел бы обратить внимание интересующихся данной темой на 2 момента. Во-первых, на последний слайд презентации. Там много вопросов, о которых стоит подумать в связи с профессионализацией оценки. Во-вторых, на то, что не включено в слайды. Я говорил об этом вчера в связи с публикацией Тома Швандта. Судя по всему, профессионализация может происходить по-разному в разных контекстах. Модель Виленски, которую можно видеть как иллюстрацию к этому посту, предполагает формирование саморегулируемого профессионального сообщества, обладающего своего рода монополией в профессиональной сфере. Швандт указывает на то, что, например, в скандинавских странах, где оценка успешно развивается, подавляющее большинство специалистов по оценке работает в государственных структурах. Это ситуация, которая модели Виленски не вполне соответствует. Добавлю, что надо еще учитывать разный уровень развития профессии в разных странах. Очень неравномерно идет развитие оценки. Это объяснимо и нормально. Но - вне всякого сомнения - стратегия профессионализации должна формироваться с учетом контекста.

Выступление Майкла Пэттона

Вчера вечером в рамках конференции АСОПП-2021 выступил Майкл Пэттон, который рассказал об опыте синтеза независимых диалогов Саммита по продовольственным системам. Об этой работе я писал ранее. Там же есть ссылка на русскоязычный отчет. Вчерашняя презентация Майкла здесь.

Интересный документ

На днях неожиданно пришло письмо от Майкла Пэттона (Michael Patton), в котором он сообщил, что "наконец-то подготовил отчет на русском языке". Понятно, что русского языка он не знает, потому я с интересом перешел по ссылке, где действительно обнаружил русскую версию отчета под названием "Синтез независимых диалогов Саммита по продовольственным системам". Отчет подготовлен BLUE MARBLE EVALUATION (Майкл является основателем этой компании).

Идея состояла в том, чтобы провести диалоги в разных странах для поиска ответов на следующие вопросы: 

• Какие преобразования продовольственных систем являются необходимыми и ожидаемыми (для достижения Целей в области устойчивого развития)?
• Кто должен участвовать в преобразовании продовольственных систем?
• Как проводить преобразование продовольственных систем?
• Какие факторы успеха являются ключевыми для достижения результатов?

Масштабы мероприятия впечатляют. Было проведено 447 диалогов, в которых приняло участие более 41000 человек. В упомянутом выше документе предлагается краткое описание результатов всего этого. Было бы, конечно, очень интересно понять, как удалось обработать такой массив качественных данных. 

В отчете даже предложена "теория преобразования" (см. ниже). Вероятно, в оригинале было "theory of transformation".

Системные диаграммы

Недавно опубликовано практическое пособие Боба Вильямса "Системные диаграммы" (System Diagrams). Эту публикацию можно скачать бесплатно. Пожертвования приветствуются. Я много раз упоминал Боба в этом блоге и не только. Он - очень интересный человек. В мире оценки известен как специалист, продвигающий идеи системного подхода и системного мышления. Боб говорит, что существуют тысячи (!) традиций построения диаграмм. Это даже сложно представить, честно говоря... В упомянутой выше книге - не пугайтесь - описано всего 6 подходов:

1. Насыщенное изображение (rich picturing). Полезно, когда вы пытаетесь справиться со сложностью ситуации и решить, на каких её аспектах вам следует сосредоточиться. Фрагмент такого изображения из книжки Боба Вильямса приведен выше. Компактный вариант описания этого подхода (по-английски) здесь.  
2. Диаграммы влияния. Полезны, когда вы хотите получить моментальный снимок того, что влияет на конкретную проблему в определенный момент времени. В рунете много публикаций про диаграммы влияния. Можно посмотреть, например, здесь.
3. Причинно-следственные диаграммы. Полезны, когда вы хотите изучить возможные последствия конкретных причинно-следственных связей в рамках решения определенной проблемы в течение заданного периода времени. Один из вариантов построения диаграммы в этой традиции здесь (по-русски). 
4. Кеневин (Cynefin). Диаграмма, которая помогает найти оптимальный способ поведения с учетом особенностей ситуации, с которой вы имеете дело. Подробнее по-русски здесь.
5. Модель жизнеспособной системы (VSM). Диаграмма, которая помогает оценить и гарантировать жизнеспособность целенаправленной деятельности с учетом диапазона конкурирующих требований, связанных с различными компонентами этой деятельности. Подробнее можно почитать по-русски здесь.
6. Культурно-историческая теория деятельности (Cultural Historical Activity Theory - CHAT). Диаграмма, которая выстраивается через ответы на серию вопросов о том, как люди с разной мотивацией могут работать вместе творчески и эффективно, особенно при реагировании на меняющиеся и сложные события. Основоположники этого подхода - российские ученые Выготский и Леонтьев. Здесь общая информация по-английски. А здесь - развернутое описание от Боба Вильямса. Тоже по-английски. Публикаций на русском языке много. Ссылаюсь на англоязычные публикации, которые больше ориентированы на практику. Например, в публикации Боба Вильямса вы найдете списки конкретных вопросов, которые помогут построить диаграмму в данной традиции.