В Денвере (шт.Колорадо) открылась конференция Американской ассоциации оценки. Тут примерно 3000 участников. Порядка 800 выступлений запланировано. Одного здания не хватило чтобы вместить все это. Конференция проходит в двух зданиях, расположенных по соседству. Тут есть некоторые проблемы с интернетом. Но я постараюсь самыми яркими впечатлениями поделиться в блоге.
четверг, 16 октября 2014 г.
вторник, 7 октября 2014 г.
Мониторинг и оценка госпрограмм с поддержкой мультиплатформенности, многопроцессорности и кластеризации
В Воронежской области завершается внедрение модернизированной информационно-аналитической системы «Мониторинг и оценка эффективности реализации государственных программ» для областного Департамента экономического развития. По сообщению сайта CNews, "система позволит проводить оценку эффективности реализации госпрограмм области и осуществлять контроль освоения бюджетных средств. С целью решения этих задач на региональном уровне создаётся облачное информационное пространство с единой базой данных, в котором будут выполняться все профильные операции. База данных будет функционировать под управлением сервера промышленного масштаба (с поддержкой мультиплатформенности, многопроцессорности и кластеризации), что обеспечит повышенный уровень сохранности информации".
Интересный опыт и приятно, что в этом направлении происходит движение.
Интересный опыт и приятно, что в этом направлении происходит движение.
понедельник, 29 сентября 2014 г.
Конференция в Бишкеке
В прошлую пятницу завершилась очередная (14 по счету) ежегодная конференция Международной сети "Оценка программ". В этом году конференцию принимал Кыргызстан, и проходила она в городе Бишкек.
В день перед конференцией прошли 4 семинара. В ходе конференции было сделано 50 докладов. Общее число зарегистрированных участников конференции составило, по словам организаторов, 140 человек. Среди них было ожидаемо много специалистов из Кыргызстана и соседнего Казахстана, но были также коллеги и из очень дальних стран - ЮАР, Великобритании, Израиля.
Из России, по моим подсчетам, было 10 человек. Однако эта небольшая группа сделала серьезный содержательный вклад: 2 семинара перед конференцией и 10 выступлений в ходе конференции.
Особенностью конференции был беспрецедентно высокий уровень участия представителей государственных структур: конференцию открыла вице-спикер парламента страны, в конференции принимали участие депутаты парламента, представители многочисленных министерств и ведомств, а также аппарата правительства и администрации президента Кыргызстана. Подчеркну: они не просто присутствовали, но выступали с интересными докладами и активно участвовали в дискуссиях. Отдельно хотел бы отметить выступление на первой пленарной сессии Заведующего отделом государственного управления и кадровой работы Аппарата Правительства Кыргызской Республики г-на Шадыбекова. Куванычбек Баймуратович принимает участие уже в третьей или даже четвертой конференции IPEN и является одним из ключевых участников процесса формирования национальной системы мониторинга и оценки в Кыргызстане.
Представители российской Ассоциации специалистов по оценке программ и политик приняли участие в форуме национальных объединений (фото от Марины Михайловой), который прошел в рамках конференции.
Считаю, что в целом уровень докладов на конференции был очень высоким.
Организация конференции также была на высоте. Все проходило в Парк-отеле, который оказался просто идеален для мероприятий подобного масштаба.
Хотел бы поздравить коллег из Кыргызстана с замечательно проведенным мероприятием и успехами в развитии национальной системы мониторинга и оценки в стране! Отдельное спасибо - Национальной сети мониторинга и оценки Кыргызстана и ее лидеру Татьяне Третьяковой, которая в 2013-14 гг. возглавляла попечительский совет IPEN.
В день перед конференцией прошли 4 семинара. В ходе конференции было сделано 50 докладов. Общее число зарегистрированных участников конференции составило, по словам организаторов, 140 человек. Среди них было ожидаемо много специалистов из Кыргызстана и соседнего Казахстана, но были также коллеги и из очень дальних стран - ЮАР, Великобритании, Израиля.
Из России, по моим подсчетам, было 10 человек. Однако эта небольшая группа сделала серьезный содержательный вклад: 2 семинара перед конференцией и 10 выступлений в ходе конференции.
Особенностью конференции был беспрецедентно высокий уровень участия представителей государственных структур: конференцию открыла вице-спикер парламента страны, в конференции принимали участие депутаты парламента, представители многочисленных министерств и ведомств, а также аппарата правительства и администрации президента Кыргызстана. Подчеркну: они не просто присутствовали, но выступали с интересными докладами и активно участвовали в дискуссиях. Отдельно хотел бы отметить выступление на первой пленарной сессии Заведующего отделом государственного управления и кадровой работы Аппарата Правительства Кыргызской Республики г-на Шадыбекова. Куванычбек Баймуратович принимает участие уже в третьей или даже четвертой конференции IPEN и является одним из ключевых участников процесса формирования национальной системы мониторинга и оценки в Кыргызстане.
Представители российской Ассоциации специалистов по оценке программ и политик приняли участие в форуме национальных объединений (фото от Марины Михайловой), который прошел в рамках конференции.
Считаю, что в целом уровень докладов на конференции был очень высоким.
Организация конференции также была на высоте. Все проходило в Парк-отеле, который оказался просто идеален для мероприятий подобного масштаба.
Хотел бы поздравить коллег из Кыргызстана с замечательно проведенным мероприятием и успехами в развитии национальной системы мониторинга и оценки в стране! Отдельное спасибо - Национальной сети мониторинга и оценки Кыргызстана и ее лидеру Татьяне Третьяковой, которая в 2013-14 гг. возглавляла попечительский совет IPEN.
понедельник, 25 августа 2014 г.
Наше облако из слов
В связи с выполнением одного из текущих заказов мне пришлось воспользоваться программами, которые создают "облака" из слов, причем размер шрифта зависит от частоты, с которой данное слово встречается в тексте.Наша компания уже много лет профессионально занимается оценкой программ, и я решил посмотреть, что получится, если загрузить описание наших услуг в программу Wordle. Получилось очень даже симпатично и содержательно верно. Можно даже, не увеличивая, ключевые слова прочесть.
понедельник, 4 августа 2014 г.
Интересно будет почитать отчет
На сайте banki.ru появилось сообщение о том, что Европейский союз планирует провести оценку эффективности экономических санкций в отношении РФ, которые накануне были официально закреплены в законодательных актах ЕС. Сообщается, что в течение действия санкций — 12 месяцев — такие оценки будут осуществляться регулярно, чтобы переоценить или дополнить введенные меры в зависимости от развития ситуации на Украине. Экономические санкции вступили в силу в пятницу и ограничивают доступ на рынки капитала для пяти российских государственных банков, запрещают физическим и юридическим лицам ЕС покупать/продавать или осуществлять другие операции с облигациями, акциями и другими инструментами денежного рынка со сроком погашения свыше 90 дней, выпущенными этими банками после 1 августа.
Если я правильно понимаю, при проведении оценки эффективности этих санкций нужно будет установить причинно-следственную связь между введением указанных ограничений и развитием ситуации на Украине. Логика воздействия ЕС в данном случае, вроде бы, была такова (на мой непросвещенный взгляд): вводятся санкции - они наносят ущерб экономике России - Россия изменяет свое поведение по отношению к Украине - ситуация на Украине улучшается.
Мда... Будет очень интересно почитать отчет о результатах оценки. Опубликуют?
Если я правильно понимаю, при проведении оценки эффективности этих санкций нужно будет установить причинно-следственную связь между введением указанных ограничений и развитием ситуации на Украине. Логика воздействия ЕС в данном случае, вроде бы, была такова (на мой непросвещенный взгляд): вводятся санкции - они наносят ущерб экономике России - Россия изменяет свое поведение по отношению к Украине - ситуация на Украине улучшается.
Мда... Будет очень интересно почитать отчет о результатах оценки. Опубликуют?
понедельник, 28 июля 2014 г.
Тенденция
Сегодня никто не станет отрицать, что оценка эффективности деятельности и оценка программ активно внедряются в практику российских органов государственного управления и государственных учреждений. Есть, однако, четкая тенденция: как только речь заходит об оценке, все, как правило сводится к формированию очередного механизма контроля (часто - общественного). Понятно, что осуществлять контроль без каких-либо полномочий сложно. Как говаривал Владимир Семенович Высоцкий: "Что за свадьба без цветов? Пьянка, да и все!". Потому все подобные инициативы предполагают наделение тех или иных структур формальными полномочиями осуществлять контроль, а также создание механизма введения санкций по результатам контроля. Достаточно обратиться к практике независимой оценки услуг социальных учреждений, о которой я писал ранее. А вот и совсем свежий пример: предложение депутата ГД РФ Дмитрия Носова, опубликованное в Парламентской газете на прошлой неделе. Далее - цитата из газеты:
"Мы должны разработать общественную систему оценки (курсив мой - АК) работы каждого чиновника от исполнительной власти», — считает депутат. Оценка будет складываться исходя из определённых критериев, к примеру, в части возвращения бюджетных средств. Таким образом, каждый чиновник мог бы получать балл, согласно которому он либо продвигается по службе, либо остаётся на месте, либо вовсе его покидает".
Мне кажется, что в этой тенденции есть два негативных момента:
- Модные нынче т.н. общественные системы оценки формируются зачастую несистемно и не имеют достаточных профессиональных и финансовых ресурсов.
- Оценка становится синонимом контроля, и уходит на второй план ее важнейшая развивающая функция - функция получения информации для принятия решений.
пятница, 25 июля 2014 г.
Нужно ли для проведения оценки программы быть экспертом в предметной области?
Вчера обсуждали с зарубежным коллегой, можно ли проводить профессиональную оценку программы, не будучи экспертом в той предметной области, где реализуется программа. Наш опыт показывает, что можно, но не без ограничений. Все зависит от характера задания на проведение оценки; точнее, от того, на какие вопросы нужно ответить.
Возьмем для примера программы в сфере здравоохранения. Бывает, что для ответа на вопросы задания достаточно выяснить мнения администраторов лечебных учреждений, врачей, медицинских сестер, пациентов и их родственников, а затем провести анализ высказанных мнений. Для проведения такой работы нужно уметь проводить индивидуальные и групповые интервью, а также анализировать качественные данные. Быть экспертом в сфере здравоохранения не требуется. С другой стороны, вопросы задания могут потребовать, к примеру, выяснения того, в какой мере соблюдаются клинические протоколы. В этом случае для сбора данных нужно быть специалистом: неспециалист попросту не поймет происходящего и не сможет увидеть то, что нужно. За такую работу мы бы не взялись без участия в нашей команде врача.
Оптимальным решением, на мой взгляд, является формирование команды для проведения оценки, в которой экспертиза в сфере оценки сочетается в нужной пропорции с экспертизой в предметной области. Для нашего региона это единственное пока реалистичное решение, т.к. специалистов по оценке немного.
Возьмем для примера программы в сфере здравоохранения. Бывает, что для ответа на вопросы задания достаточно выяснить мнения администраторов лечебных учреждений, врачей, медицинских сестер, пациентов и их родственников, а затем провести анализ высказанных мнений. Для проведения такой работы нужно уметь проводить индивидуальные и групповые интервью, а также анализировать качественные данные. Быть экспертом в сфере здравоохранения не требуется. С другой стороны, вопросы задания могут потребовать, к примеру, выяснения того, в какой мере соблюдаются клинические протоколы. В этом случае для сбора данных нужно быть специалистом: неспециалист попросту не поймет происходящего и не сможет увидеть то, что нужно. За такую работу мы бы не взялись без участия в нашей команде врача.
Оптимальным решением, на мой взгляд, является формирование команды для проведения оценки, в которой экспертиза в сфере оценки сочетается в нужной пропорции с экспертизой в предметной области. Для нашего региона это единственное пока реалистичное решение, т.к. специалистов по оценке немного.
вторник, 17 июня 2014 г.
Декан факультета менеджмента ВШЭ о рейтингах вузов
Декан факультета менеджмента НИУ «Высшая школа экономики» Николай Филинов, рассказывая о новой европейской системе формирования рейтингов вузов (U-Multirank), обратил внимание на то, что "...создание рейтингов учебных заведений — вещь, безусловно, интересная, но не такая безобидная, как это кажется на первый взгляд. Рейтинги сталкивают интересы учебных заведений, принимающих в них участие. Поэтому подавляющее большинство профессиональных ассоциаций в области образования категорически отказываются от создания рейтингов, а занимаются аккредитацией.
В последнее время рейтингам порою придается излишне большое значение, а это приводит к тому, учебное заведение начинает выстраивать свою политику так, чтобы любой ценой добиться более высокого места в рейтинге".
четверг, 5 июня 2014 г.
EVAL.KZ
Сегодня в Алматы был торжественный вечер, посвященный 10-летию наших давних партнеров и друзей - АРГО (Ассоциация развития гражданского общества). Эта организация является одной из самых активных в развитии оценки социальных программ в Казахстане. Учитывая, что коллеги обсуждают создание национальной ассоциации специалистов по оценке программ, мы (Компания "Процесс Консалтинг") решили подарить им красивое и стильное доменное имя для будущего сайта ассоциации. Исходили из общего тренда, заданного много лет назад Американской ассоциацией оценки (www.eval.org). Eval - это первые четыре буквы слова evaluation (оценка). Дальше национальные ассоциации стали, естественно, использовать национальные домены верхнего уровня: во Франции есть www.eval.fr, в Исландии - www.eval.is, в России - www.eval.ru. Мы решили продолжить эту линию и подарили казахстанским коллегам домен eval.kz, который оказался свободен. Таким образом, нашего полку прибыло!
На фото - момент торжественной передачи домена директору АРГО Джамиле Асановой. Справа от нее - Кайша Атаханова, директор программы DRC.
На фото - момент торжественной передачи домена директору АРГО Джамиле Асановой. Справа от нее - Кайша Атаханова, директор программы DRC. среда, 4 июня 2014 г.
Чем мониторинг отличается от оценки
Сегодня проводил семинары по развитию сетей и по оценке сетей в рамках конференции в Алматы (Казахстан). Считаю, что лучший вопрос был задан про то, чем мониторинг отличается от оценки. Один из участников сказал, что прошел много семинаров, на которых им объясняли, что мониторинг принципиально отличается от оценки. В рамках же классификации, которую я предложил, мониторинг является одним из видов оценки. В чем принципиальная разница и есть ли она? Думаю, что дискуссия об отличиях мониторинга от оценки фактически является дискуссией об отличиях индикаторной оценки от эмпирической оценки. Если перевести разговор в эту плоскость, то все сразу проясняется. Конечно, отличия есть.
Подписаться на:
Сообщения (Atom)