среда, 31 июля 2019 г.

XXIII конгресс INTOSAI

INTOSAI (ИНТОСАИ) - международная организация, создана в 1953 году, в нее входят высшие органы государственного финансового контроля 196 стран мира. Счетная палата РФ является членом ИНТОСАИ с момента своего создания в 1995 году и активно участвует в ее деятельности. Российский контрольный орган работает во всех основных управляющих и рабочих органах ИНТОСАИ, включая Комитет по профессиональным стандартам и Комитет по обмену опытом.

В 2016 году XXII Конгресс ИНТОСАИ, определил высший орган аудита Российской Федерации (Счетную палату РФ) принимающей стороной XXIII Конгресса ИНТОСАИ, который пройдет в Москве с 23 по 29 сентябре этого года.


Темы конгресса:
I. «Информационные технологии в развитии государственного управления»
      Подтема I.1
      Важность применения достоверной и оперативной информации в электронном виде для развития государственного управления
      Подтема I.2
      Место и роль больших данных в деятельности высших органов аудита 
II. «Роль высших органов аудита в достижении национальных приоритетов и целей».
       Подтема II.1
       Стратегический аудит: роль высших органов аудита в оценке реализуемости целей, результатов и рисков государственных проектов и программ
        Подтема II.2
        Прогнозирование и аналитическая деятельность в высших органах аудита: экологические и социальные аспекты устойчивого развития. 

Хотел бы обратить внимание коллег, занимающихся оценкой программ и проектов, на тему II. Счетная Палата не только включает оценку в свою повестку, но и выносит эту тему на обсуждение мирового профессионального сообщества. 

пятница, 26 июля 2019 г.

Ещё раз о "законе Кемпбелла"

В 1976 году американский исследователь Дональд Кемпбелл в своей работе "Оценка влияния запланированных социальных изменений"* написал: «Чем больше любой количественный (или даже качественный) индикатор используется в процессе принятия социально-значимых решений, тем в большей степени он становится подвержен коррупционному давлению и тем в большей степени он будет искажать и нарушать социальные процессы, для мониторинга которых он был изначально предназначен». Именно это стали впоследствии называть "законом Кембелла", справедливость которого получила массовые подтверждения по всему миру.

Сегодня интернет-газета ZNAK опубликовала статью под названием "Кабмин утвердил KPI для губернаторов. Эксперты ожидают манипуляций с данными". Чего же ожидают эксперты газеты? Вот один из примеров: "...Также в числе критериев оценки борьба с бедностью. Здесь оценка будет производиться по числу людей с доходами ниже прожиточного минимума. К 2024 году их должно стать меньше вдвое. Эксперты предупреждают, что прожиточный минимум устанавливают регионы, и местные власти могут им манипулировать, составляя корзину из более дешевых товаров, чтобы сократить число бедных".

*Campbell, Donald T. (1976) Assessing the Impact of Planned Social Change

среда, 24 июля 2019 г.

Заявки на выступление на профессиональной конференции и их оценка

Каждый год по всему миру проходят десятки профессиональных конференций по оценке. В подавляющем большинстве случаев программы таких конференций формируются на основе конкурсного отбора заявок на выступления. Для того, чтобы отобрать лучшие заявки, нужна система их оценки. В общем, и здесь оценка...

Важное предварительное соображение: поскольку проводится конкурс, то надо, чтобы участники были в равных условиях. Для этого они все должны понимать, какие требования предъявляются к заявкам на выступления со стороны организаторов конференции. И эти требования должны соответствовать критериям оценки заявок. Здесь, кстати, без критериев никак не обойтись, поскольку имеет место сравнение. 

Какими могут быть критерии оценки заявок? 

Вот примерный вариант, который используют наши американские коллеги:
  • Соответствие теме конференции. Раз объявляется тема конференции, то важно, чтобы люди именно в этом контексте представили свой материал. Тема конференции, как правило, формулируется достаточно широко и позволяет любое сообщение подать в нужном свете. 
  • Значимость для участников конференции. Тут комментировать особо нечего, все понятно. Вспоминаю мои первые конференции, когда заявка на тему "Развитие оценки в России и СНГ" принималась и включалась в программу, но на выступление приходили из солидарности лишь немногочисленные участники... из России и СНГ. Как-то раз даже решили по-русски делать доклад, т.к. англоязычных участников не оказалось в зале вообще.  
  • Техническое качество заявки. Тут без комментариев.
  • Инновационность. Более ценными представляются заявки, в которых содержится нечто новое - подход, метод, инструмент, модель и т.д. 
  • Уровень обобщения. Одно дело, когда человек просто делится своим опытом, и совсем другое, когда выступающий предлагает рефлексию по поводу своего опыта; обобщения, которые могут оказаться применимыми в разных сферах. 
Естественно, для каждого критерия разрабатывается соответствующая шкала. 

На больших конференциях лучшие заявки ставятся на "прайм-тайм" - такое время, когда участники конференции уже проснулись, не очень устали, и еще не начали разъезжаться по домам. Таким образом повышаются шансы, что хорошие выступления услышат многие. Когда заявка получает не очень высокую оценку, выступление может быть запланировано, например, на 7 утра (это не шутка!) с минимальными шансами на аншлаг. Многие по этому поводу возмущались, и теперь таких ранних сессий нет. Первые сессии начинаются в этом году на конференции Американской ассоциации оценки в 8.00, что, по нашим меркам, тоже довольно рано. Но это уже другая история :)  

пятница, 19 июля 2019 г.

Консультант как горный гид

На днях исполнилось 25 лет компании "ШАГ консалтинг". Основатели этой компании Евгений и Светлана Емельяновы - наши давние друзья: мы познакомились за несколько лет до того, как учредили свои компании. Работа ШАГа меня всегда восхищала. Достаточно посмотреть на их сайт, чтобы понять, насколько серьезный и успешный консалтинговый бизнес удалось выстроить коллегам! В течение последних 4-х лет ШАГ возглавляет рейтинг российских компаний, занимающихся бизнес-консультированием, а из первой тройки, по-моему, никогда не "выпадал".

Евгений Емельянов в обращении к посетителям сайта ШАГа пишет: "Если говорить о том, что такое консалтинг от ШАГа, то самая близкая мне аналогия – это работа проводников, тех, что ведут по местности. Как шерпы на семитысячниках, как Дерсу Узала в тайге."  Мне эта метафора очень понравилась. Первое, что пришло в голову: горные гиды никогда не бросят клиента. На такого консультанта можно положиться! Решил ради интереса заглянуть в Этический кодекс горных гидов России. Обнаружил там положения, которые действительно вполне применимы к деятельности консультанта по управлению. Судите сами (цитата взята с указанного выше сайта АГГР - Ассоциации горных гидов России): 

"1. Безопасность является главным приоритетом в работе. Наши личные интересы и цели интересы наших клиентов должны быть второстепенными по отношению к безопасности.
​​2. Безопасность других людей в горах также является нашим приоритетом, и мы должны, когда возможно оказывать им помощь в чрезвычайных ситуациях. Однако такая помощь может оказываться только в тех случаях, когда это не отразится на безопасности наших клиентов.
3. Наши клиенты имеют право в полной мере рассчитывать на то, что все гиды АГГР имеют техническую и методическую подготовку, соответствующую современным профессиональным требованиям и стандартам.
4. Гиды всегда должны выглядеть профессионально, использовать только качественное снаряжение, соответствующее поставленным задачам и находящееся в полноценном функциональном состоянии.
5. Гиды должны объективно оценивать пределы своих собственных физических и технических возможностей и своего опыта, и выбирать только те маршруты, которые полностью соответствуют текущему уровню их квалификации.
6. Во время пребывания в любых горных районах России и мира все гиды, представляющие АГГР, должны вести себя в соответствии с принятыми нормами и правилами поведения в данных горных районах.
7. Гиды должны бережно относиться к окружающей среде, традициям и обычаям местного населения, а также должны уважать ограничения доступа и правила, установленные организациями по защите окружающей среды в России и мире.
8. Гиды АГГР должны уважительно относиться к своим и чужим клиентам, гидам других организаций, не допускать неуважительного отношения, панибратства, некорректной коммуникации.
9. Во время публичных выступлений, лекций, семинаров, другое, гиды АГГР не должны допускать неуважительных высказываний в адрес других гидов, школ, стандартов подготовки. Помнить о том, что вы представляете Ассоциацию горных гидов России."

С юбилеем, ШАГ!!! От души желаю дальнейших успехов на трудных маршрутах!!!

среда, 17 июля 2019 г.

Доказательная филантропия

Несмотря на то, что международные эксперты считают доказательность одной из значимых и наиболее вероятных характеристик будущего филантропии, термин "доказательная филантропия" у нас пока не очень распространен. Google дает всего три (!) ссылки на русскоязычные публикации, в которых этот термин используется. Хронологически первая из них под названием "Доказательная филантропия: практические советы" относится к 2016 году и представляет собой краткий обзор некоторых зарубежных публикаций, подготовленный АНО "Эволюция и филантропия". В 2018 году АСИ опубликовало большое интервью с директором КАФ Марией Черток, которое называется "Доказательная благотворительность"

Доказательный подход предполагает обоснованное принятие наиболее значимых решений с использованием надежных данных. 

Имеются в виду, например, такие решения, которые приходится принимать руководителям филантропических организаций: 
  • Как выбрать проблему, на решение которой направить усилия? 
  • Что именно поддерживать? 
  • Как финансировать? (несколько больших или много маленьких грантов? продолжительность финансирования? насколько ограничивать грантополучателя? и т.д.)
В качестве обоснования используются знания и опыт грантодателя, мнение благополучателей, результаты научных исследований, результаты оценки деятельности организации и её результатов. Очевидно, что оценка проектов и программ органично встраивается в концепцию доказательной филантропии как механизм, позволяющий получать информацию для принятия значимых управленческих решений. 

Один из дискуссионных вопросов в сфере доказательной филантропии выглядит следующим образом.

Что правильнее:
                                         или
  • Использовать критическое мышление в сочетании с лучшими из доступных доказательств, не увязывая их качество со способом получения (что ближе к традициям доказательного менеджмента).
А как бы на этот вопрос ответили Вы? 

среда, 10 июля 2019 г.

Страховка для консультантов

Речь идет о страховании рисков, связанных с профессиональной деятельностью консультантов.

Примеры страховых случаев:
  1. Клиент следует рекомендации консультанта, и это приводит к убыткам. Речь идет, естественно, о непреднамеренных ошибках консультанта. Страховка покрывает расходы на юридическую защиту и урегулирование претензий. Такая страховка используется в ситуациях, когда можно доказать причинно-следственную связь между выполнением рекомендации консультанта и убытками клиента,с кажем в сфере налогового консультирования. 
  2. Консультант использует дорогостоящее оборудование (например, компьютер), который выходит из строя (либо его крадут) во время поездки к клиенту. Страховка позволит консультанту восстановить оборудование или купить новое.
  3. Хакеры в результате кибер-атаки похищают у консультанта конфиденциальную информацию о клиенте и раскрывают её. Страховка покрывает расходы на преодоление кризисной ситуации, восстановление данных, а также судебные издержки.
При оформлении страховки учитывается - в числе прочего - опыт консультанта: чем больше опыт, тем меньше вероятность ошибки, и, следовательно, тем меньше стоимость страховки. Это напоминает ситуацию со страхованием гражданской ответственности водителей - опытные платят за страховку меньше. 

Мы оформляли такую страховку при проведении оценки программы лишь один раз по требованию западного клиента. Согласно политике их организации, наличие страховки по п.1 (см. выше) было обязательным условием при заключении контракта. Страховая компания была тоже зарубежная. 

четверг, 4 июля 2019 г.

Блог Джонатана Морелла

Сегодня хотел бы рекомендовать тем, кто читает по-английски, замечательный блог Джонни Морелла (Jonathan (Jonny) A. Morell). Очень интересные и компактные тексты о разных важных для оценки вещах. Особо хочу отметить его публикации про использование системного мышления и про модели. 

Приведу несколько цитат для "затравки": 
  • "Модель - это упрощение реальности, в котором намеренно не отражены некоторые её аспекты для того, чтобы выделить другие. Упрощение требуется, потому что без него охватить все соответствующие нашей задаче факторы невозможно"
  • "Независимо от того, насколько мы умны, мы никогда не узнаем, каковы все соответствующие задаче факторы. У нас не может быть полной модели, как бы мы ни старались"
  • Джордж Бокс был прав, сказав: «Все модели ошибочны, но некоторые из них полезны».

понедельник, 1 июля 2019 г.

Срок приема заявок продлен на две недели

20 июня я писал о том, что каждый год сроки приема заявок на выступления на конференции АСОПП переносятся по той причине, что многие не успевают подать заявку вовремя. Нынешний год не стал исключением: сегодня оргкомитет продлил срок приема заявок на выступления на две недели. Замечу, что прием заявок был открыт 28 марта 2019 года... То есть трех месяцев оказалось недостаточно :) Ну что же, осталось две недели, и теперь уж точно надо поторопиться!