четверг, 28 июня 2012 г.

Оценка государственных программ в бюджетном послании президента

Сегодня президент РФ выступил с посланием "О бюджетной политике в 2013 - 2015 годах". Процитирую два положения из этого послания, которые представляют интерес для всех, кто интересуется оценкой программ (в послании эти две цитаты идут в обратном порядке):
  1. "Для  достижения  целей  социально-экономической политики и обеспечения общественного контроля  за  их  достижением формирование и исполнение  бюджета  должно  осуществляться  на  базе  государственных программ".
  2. "Пора уходить от ставшего уже привычным измерения исполнения бюджета лишь фиксацией расходования средств на те или иные цели. Критерием должно стать достижение целей социально-экономической политики,  на  финансовое обеспечение которых направляются бюджетные средства".
Другими словами, теперь государственные планы будут состоять из программ. А оценка исполнения государственных планов будет производиться в зависимости от того, в какой мере достигнуты цели программ.

Полагаю, что данная инициатива в ближайшее время столкнется со следующими существенными трудностями:

Выступление в Астане

Через два дня завершается прием заявок на выступления на конференции IPEN в Астане в сентябре. Мы с коллегами стараемся каждый раз рассказать о том, что нового появилось за прошедший с предыдущей конференции год. Поскольку я вынужден был пропустить конференцию в Тбилиси, то "отчетный период" у меня в этот раз - два года. Тема конференции в Астане - использование результатов оценки при принятии управленческих решений. Решил порассуждать о том, как дизайн программ влияет на оценку их результатов и последующее использование результатов этой оценки. Тема из серии "Боль моя, ты покинь меня" (помните эту песню из к/ф про Штирлица?). Постоянно сталкиваемся с одной и той же проблемой: из-за некачественного дизайна программ (в частности, из-за некорректной постановки целей и изъянов в логике) оценивается то, на что программа повлиять попросту не могла. А то, на что она могла повлиять и повлияла, не оценивается вовсе. Соответственно, результаты оценки не говорят ни о чем применительно к программе, и их использование при принятии управленческих решений попросту противопоказано. Если мое выступление будет включено в программу, заходите - поговорим. Программа конференции будет опубликована до конца июля.

воскресенье, 10 июня 2012 г.

В какой момент можно делиться с клиентом предварительными результатами

Проведение оценки программы предполагает выполнение определенных действий в определенной последовательности. В частности, нужно вначале собрать даные, потом проанализировать их, а затем вынести суждения (ответить на вопросы задания). Вынесение суждений на основе неполных данных чревато ошибками. Вынесение суждений без должного анализа данных также весьма рискованно, поскольку в этом случае консультант будет руководствоваться интуитивными ощущениями, возникающими в связи с полученной информацией и не только.
Следовательно, делиться результатами оценки программы с клиентом можно только после того, как проведен анализ данных. Это противоречит принятой многими организациями практике заслушивать предварительные результаты сразу по окончании полевого этапа работ. Связано это с несколькими причинами, одна из которых заключается в том, что консультанты приезжают издалека (например, из другой страны), и клиент их уже не увидит после окончания полевого этапа работ (сбора данных): они уедут домой и потом просто пришлют отчет. Поэтому, вроде бы, идея переговорить с консультантами о предварительных результатах перед их отъездом выглядит здраво.
И вот тут мы можем вернуться к началу моего рассуждения. О чем могут рассказать консультанты в этот момент? У них собран огромный массив данных, которые не только не проанализированы, но и не обработаны даже как следует. Естественно, у консультантов появляются некоторые гипотезы к моменту окончания собра данных. Но гипотезы эти надо тщательно проверить и перепроверить; понять, не следует ли получить дополнительные данные для их потверждения либо опровержения. Только после этого гипотезы переходят в разряд основанных на фактах суждений. И только тогда ими можно делиться с клиентом. Собственно, мое предложение ко всем участникам процесса оценки заключается в том, что не надо спешить с представлением предварительных результатов. Клиенту не следует подталкивать консультантов к тому, чтобы делать недостаточно обоснованные выводы. А консультантам не нужно соглашаться на такие предложения.
Существует компромиссный вариант: консультант может устно рассказать клиенту об основных  предварительных результатах по окончании анализа данных, но до того, как приступит к написанию отчета. Такой подход считаю не только допустимым, но очень даже желательным. Он дает возможность получить предварительную "обратную связь" от клиента, которая поможет при написании отчета. И тут нам приходит на помощь скайп - вполне можно обеспечить эффект присутствия даже если нельзя встретиться лицом к лицу.
В заключение хочу рассказать забавную историю. Один из наших контрактов на оценку программы был заключен с зарубежной организацией. Форма контракта клиентом использовалась стандартная, предполагающая, что консультанты приезжают из другой страны, чтобы оценить программу в России. Так вот, нам пришлось убеждать клиента, что формулировка "консультанты знакомят клиента с предварительными результатами оценки программы непосредственно перед тем, как уедут из России" не вполне отражает наши намерения и что уезжать из России мы вовсе не собираемся. Уговорили :)