Ценности в социальном проектировании

На прошлой неделе завершил небольшой курс по социальному проектированию в МГППУ для студентов магистратуры. Очень давно не вел курса занятий именно по проектированию. Как-то все время получалось, что разговор о проектировании идет в контексте обсуждения оценки программ. Поэтому для подготовки и проведения курса пришлось собрать и упорядочить много разных материалов, включая совсем новые. Хотелось рассказать студентам о том, где сейчас передний край в разработке методов социального проектирования, над чем думают лучшие умы.

Естественно, что некоторые разделы курса были новыми и для меня. В частности, это относится к рассмотрению ценностей программ как одного из компонентов социального проектирования. Идею эту я позаимствовал у американских специалистов Гаргани и Доналдсона. Их книжка с подробным описанием подхода выйдет из печати в ближайшее время (Gargani, J., & Donaldson, S. I. (2015). Theory-driven program design and redesign: A practical guide to achieving social impact. Newbury Park, CA: Sage).

Включение в описание программы перечня базовых ценностей не является чем-то абсолютно новым. Поиск в Google по ключевым словам "program values" дает порядка 85 тыс. ссылок. Понятно, что при разработке программы или проекта авторы руководствуются определенными ценностями, которые, в частности, должны согласовываться с ценностями их организации и ценностями донора, которому они планируют подать заявку на получение финансирования. Однако, чаще всего ценности остаются "за кадром", и в описание проекта или программы их не включают. Новизна идеи Гаргани и Доналдсона состоит для меня в том, чтобы включать ценности как обязательный раздел в описание замысла проекта (программы).
На рисунке в свернутом виде представлено содержание той части учебного курса, в которой мы говорили о ценностях в социальном проектировании. 

АСОПП: ответы на два часто задаваемых вопроса

15 мая 2014 года начала свою работу российская Ассоциация специалистов по оценке программ и политик (АСОПП). Подготовка к этому событию заняла более двух лет. К моменту создания АСОПП уже активно работали подобные национальные ассоциации в  Грузии, Кыргызстане и Украине. Теперь и в России есть своя ассоциация, что открывает новые возможности для развития нашей профессии у нас дома. Сегодня активно работает правление АСОПП, в рамках Международного года оценки полным ходом идет подготовка к первой конференции АСОПП, развиваются международные контакты ассоциации с аналогичными ассоциациями в нашем регионе и за его пределами. Скоро состоятся выборы новых членов правления и президента ассоциации, который будет возглавлять ее в 2016-17 гг.

Один из вопросов, которые часто задают членам правления АСОПП: при ком создана ваша ассоциация? Ответ "не при ком" многим кажется неожиданным. Ассоциация создана по инициативе людей, которых объединило стремление развивать оценку программ и политик как профессию в России. За созданием АСОПП действительно не стоят никакие структуры. Ассоциация опирается на своих членов и действует в их интересах. 

Членами ассоциации могут быть только физические лица. Есть два уровня членства. Можно просто зарегистрироваться на сайте АСОПП. В этом случае вы имеете возможность получать рассылку ассоциации, имеете небольшие скидки на участие в мероприятиях ассоциации и, естественно, можете указывать, что являетесь членом данного профессионального объединения, в своем резюме. Первый уровень членства в АСОПП чем-то сродни членству в группах на Facebook. Естественно, для ассоциации важно число таких членов, и мы очень ценим их поддержку. Второй уровень членства предполагает оплату членского взноса, которая в силу ряда обстоятельств осуществляется в форме благотворительного пожертвования. Те, кто оплачивают членские взносы, получают доступ к онлайновой библиотеке АСОПП, участвуют в принятии решений, в голосованиях, могут быть избраны в руководящие органы АСОПП, получают существенные скидки на участие в мероприятиях ассоциации. Размер ежегодного пожертвования (членского взноса) - 3000 рублей. 

Второй вопрос, который часто задают членам правления: что я буду иметь с того, что внесу пожертвование в поддержку АСОПП? Вопрос абсолютно резонный. На него есть два ответа. Первый приведен выше. Второй же заключается в том, что оплачивая членский взнос АСОПП вы не столько "покупаете" услуги ассоциации, сколько поддерживаете развитие профессионального сообщества и профессии в нашей стране. Правильнее относиться к этому как некоторому альтруистическому акту, а не как к коммерческой сделке. Самостоятельность ассоциации в числе прочего определяется ее финансовыми возможностями. На данный момент членские взносы являются основным источником финансирования АСОПП. Потому я хотел бы выразить особую благодарность тем, кто нашел возможность поддержать ассоциацию деньгами. Как президент АСОПП (2014-15) и как один из инициаторов ее создания я верю, что число таких людей будет расти и мы построим устойчивую национальную профессиональную ассоциацию в сфере оценки программ и политик. Вступайте в АСОПП, чтобы получить возможность сделать вклад в это важное дело!

Открыт прием заявок на выступления на конференции АСОПП-2015

Российская Ассоциация специалистов по оценке программ и политик (АСОПП) приглашает всех желающих принять участие в конференции «Оценка программ и политик в России: становление профессии». Конференция пройдет в Москве 30-31 октября 2015 года. Накануне конференции (29 октября 2015 г.) пройдут обучающие семинары. Программа конференции будет сформирована на основе конкурсного отбора заявок на выступления. Прием заявок на выступления открывается 2 марта 2015 года и будет закрыт 30 апреля 2015 г. в 18.00 по московскому времени. Программа семинаров и конференции будет опубликована 29 мая 2015 года. В этот же день будет открыта регистрация участников конференции. Все подробности на сайте конференции. 

Еще раз об оценке эффективности судов

На сайте "Ракурс" опубликована статья о критериях оценки эффективности судов в США. Этой темы я уже касался дважды в связи с публикациями по поводу казахстанского опыта. Статья, о которой идет речь сегодня, написана в связи с судебной реформой на Украине.

Вот какие критерии оценки эффективности судов в США приводятся в данной публикации: 

1. доступность и объективность
2. процент рассмотренных дел от общего количества дел, поступивших в суд
3. соблюдение процессуальных сроков, то есть процент дел, рассмотренных или завершенных другим способом в течение отведенного на них процессуального срока
4. продолжительность нахождения дел на рассмотрении (количество дней от подачи дела в суд до даты проведения оценки) 
5. надежность даты слушания дела, то есть количество назначений дат слушания дела при рассмотрении
6. надежность и целостность материалов дел
7. процент взысканных и переданных по назначению штрафов от общей суммы назначенных в конкретных делах денежных наказаний
8. результативность процесса отбора присяжных, достаточно квалифицированных и готовых войти в состав суда, выраженная как процент от общего количества потенциальных присяжных
9. удовлетворенность работников судебного аппарата
10. средняя стоимость рассмотрения одного дела, отдельно по типам дел

Растём!

Сегодня в Общественной Палате РФ прошел "круглый стол" на тему "Развитие в России культуры оценки социально-экономической эффективности социальных программ". На мой взгляд, о развитии культуры оценки там речи не было вовсе. Зато были представлены очень разные подходы к оценке социально-экономической эффективности как программ, так и организаций. Вероятно, в ближайшее время представленные на "круглом столе" материалы будут доступны на каком-нибудь сайте, потому обсуждать детали представленных подходов я сейчас не буду. Хочу сказать о другом. Судя по всему, мы достигли такого момента, когда достаточно много людей и организаций в России всерьез занимается различными видами оценки программ. Это говорит об определенном уровне развития этой сферы деятельности у нас в стране. Как справедливо отметила одна из участниц "круглого стола", эти совершенно разные подходы к оценке не следует пытаться объединять. Наоборот, каждый из них должен развиваться и совершенствоваться самостоятельно. А объединяться они должны в головах специалистов-практиков, которые по мере необходимости будут выбирать те методы или такое их сочетание, которое даст наилучшие результаты при заданных ограничениях. Чем шире будет методологический репертуар практиков в сфере оценки, тем лучше. И еще: никогда все не будут уметь всё. Уже наметилась вполне отчетливая специализация в сфере оценки у различных групп и отдельных людей, что абсолютно закономерно и правильно. Растём!

А кто сказал, что это легко?

Главное при разработке любой программы - аргументированно показать, как действия в рамках программы приведут к достижению цели программы. Другими словами, речь идет об обосновании причинно-следственных связей между действиями и ожидаемыми результатами. 

Сделать такое описание "теории" программы очень непросто. Трудности начинаются уже на стадии формулировки цели программы. Очередное подтверждение тому -  проект Государственной программы «Патриотическое воспитание граждан Российской Федерации на 2016-2020 годы». Говорят, что Росмолодежь подготовила окончательную версию этого документа. Бюджет программы - около 2 миллиардов рублей. Я не имел возможности ознакомиться с доработанной версией программы, но читал ее проект. 

Вот как в проекте программы были сформулированы цель и задачи программы (курсив мой):

Председатель Верховного суда Казахстана - за использование эмпирической оценки

В январе этого года я уже писал о казахстанской инициативе по оценке деятельности судов. Сегодня появилась интересная статья, в которой Председатель Верховного суда Республики Казахстан Кайрат Мами рассказывает о "внедрении социологических замеров как инструмента оценки эффективности деятельности судов и мониторинге работы судов в целом".

«Хочу отметить, что с 16 февраля в судах, при участии Программы развития ООН в Казахстане, будет начат очередной исследовательский проект, который продлится три месяца. Планируется изучить мнение более десяти тысяч граждан по всей республике. Результаты будут рассмотрены по завершении первого полугодия», - сказал Кайрат Мами.

А я хотел бы отметить, что в данном случае одно из высших должностных лиц соседней страны де-факто говорит о том, как важно использование эмпирической оценки ("социологические замеры" есть не что иное как сбор и анализ эмпирических данных) в деятельности государственных органов и какие результаты оно дает. 

Сколько должна стоить оценка программы

Естественно, стоимость оценки должна соответствовать ценности ее результатов. Однако это мало поможет, скажем, спланировать бюджет оценки на год.
Наиболее распространен подход, заключающийся в том, что стоимость оценки указывают как процент от общей стоимости программы. Как следует из приведенной ниже таблицы, чаще всего бюджет оценки составляет от 5 до 10% от бюджета программы, которую предстоит оценивать.

Это - ориентировочные пропорции, на уровне политик организаций. Понятно, что могут быть оценки, стоимость которых сопоставима со стоимостью программы (например, в пилотных программах). 

Гуманистический подход к оценке программ: есть о чем подумать

Тема эта появилась в моем поле зрения благодаря коллегам из фонда "Культура детства", которые на протяжении нескольких лет последовательно развивают ее.

Для того, чтобы охарактеризовать гуманистический подход к оценке программ, логично обратиться к универсальным базовым принципам гуманизма (см., например, публикации Российского гуманистического общества), а также посмотреть, как этот подход реализован в других сферах, например, в психологии (см. "гуманистическая психология") и педагогике (см. "гуманистическая педагогика"). 

Вот один из вариантов формулировок принципов гуманистической педагогики: 

1. Учебный процесс должен направляться самим учеником. 
2. Школы должны готовить учеников, которые хотят учиться и знают, как это делать.
3. Единственная форма значимой оценки - это самооценивание.
4. Чувства, как и знания, являются важной частью процесса обучения.
5. Обучение происходит наиболее эффективно в обстановке, где ученику ничто не угрожает. 

Мне кажется, что даже если просто попытаться переформулировать эти принципы применительно к оценке программ, заменив "обучение" на "оценку", то уже интересно получается. Есть о чем подумать, по крайней мере. 

Оценочные исследования и доказательный менеджмент в социальной сфере

Вчера в Общественной Палате РФ состоялся "круглый стол" на тему "Актуальные проблемы профессионализации социальных инициатив: вызовы времени и перспективы сотрудничества ВУЗов с негосударственными организациями". Мероприятие было организовано Центром доказательного социального проектирования при МГППУ, о котором я писал недавно.

Свое выступление в рамках "круглого стола" я назвал "Оценочные исследования и доказательный менеджмент в социальной сфере". Тезисы выступления приведены ниже. Презентацию в формате PDF можно посмотреть или скачать здесь.