четверг, 29 мая 2014 г.

На съезде ССОПиР будут обсуждать оценку качества услуг

Общероссийская общественная организация "Союз социальных педагогов и социальных работников" (ССОПиР) проведет 7-8 октября 2014 года в Москве IV Съезд социальных работников и социальных педагогов России. В проекте программы съезда предполагается обсуждение следующей темы: "Независимая  оценка  качества работы организаций, оказывающих услуги в сфере социального  обслуживания: контроль качества, рейтинги  деятельности учреждений, механизм  включения  некоммерческих и общественных организаций". В явном виде оценка в программе съезда больше нигде не присутствует, хотя, на мой взгляд, не лишне было бы там поговорить и об оценке программ.
Организаторы обещают, что более подробную информацию об организации работы Съезда и условиях участия в нем можно будет получить на сайте ССОПиР. Пока такой информации я на этом сайте не нашел. 

среда, 28 мая 2014 г.

Синяя точка на карте мира оценки

Ассоциация специалистов по оценке программ и политик вступила в Международную организацию по сотрудничеству в сфере оценки (IOCE). На сайте IOCE есть впечатляющая интерактивная карта мира, где можно увидеть все существующие на сегодняшний день профессиональные объединения в сфере оценки - региональные и национальные. АСОПП стала 110-й ассоциацией в базе данных IOCE, а Россия - 98-й страной, в которой создано профессиональное объединение. Синяя точка, обозначающая АСОПП, соседствует на карте со звездочкой, обозначающей региональное объединение, действующее в странах СНГ с 2000 года - Международную сеть "Оценка программ".
В планах АСОПП - активное развитие сотрудничества с национальными профессиональными объединениями в нашем регионе. Такие объединения (формальные и неформальные) есть в Азербайджане, Армении, Грузии, Казахстане, Кыргызстане, Таджикистане и Украине. 

четверг, 22 мая 2014 г.

Индикаторы науки и технологии...прошлого века?

Вышла в свет новая книга: Осипов Г.В., Климовицкий С.В. Индикаторы науки и технологии: история, методология, стандарты измерения / Научный совет по Программе фундаментальных исследований Президиума Российской Академии наук «Экономика и социология науки и образования» / [Г.В. Осипов, С.В. Климовицкий]. — М.: ЦСП и М, 2014. — 180 с.
В аннотации говорится, что "в данной книге рассматриваются вопросы измерения научной и технологической деятельности на основании опыта международных измерений ОЭСР. В работе содержится исторический обзор развития научной статистики и индикаторов науки и технологии и систематизированы общие стандарты измерения и проведения обследований социологов, обсуждаются основные принципы и модели измерения, обобщены. Для, экономистов, статистиков". Думаю, справедливо будет добавить: "и для специалистов по оценке программ и политик".
Авторы во введении поясняют, что "настоящее издание ... ставит своей задачей обобщение и систематизацию существующей международной практики измерения научно-технологической деятельности, а также ее критический анализ с целью выявления присущих этой практике недостатков". 
В связи с таким посылом меня несколько удивил список литературы, которая использовалась при подготовке данной книги. Список солидный, в нем 98 позиций. Все публикации зарубежные, и все датированы прошлым веком - от самого его начала до 90-х годов. Исключение составляют 12 публикаций одного и того же автора - Бенуа Годин (Benoit Godin), которые имеют статус working papers и опубликованы с 2000 по 2006 гг. в рамках Проекта по истории и социологии статистики науки и технологии (Project on the History and Sociology of S&T Statistics). Таким образом, только что вышедшая в свет книга опирается преимущественно на публикации 15-20-летней (и более) давности и представляет собой взгляд на проблему из 20 века. Мне как-то не верится, что Бенуа Годин был единственным исследователем, который занимался индикаторами науки и технологии в 21 веке. 
Получается, что систематизация и анализ современной международной практики остались вне поля зрения авторов данной книги? Интересно, почему? 

понедельник, 19 мая 2014 г.

Опубликован отчет об исследовании российских фондов местных сообществ

На сайте CAF Россия опубликован отчет об исследовании российских фондов местных сообществ "Местная филантропия национального значения". Отчет основан на материалах двух независимых исследований, проведенных в прошлом (2013) году. Одно из этих исследований провел CAF Россия, а другое - наша компания. Сводный отчет сделали в CAF. Он скоро будет доступен и на английском языке. 

Выступление в Киеве по скайпу

16 мая выступал на конференции в Академии государственного управления Киеве - по скайпу. Говорил о том, что для успешного внедрения оценки программ необходимо принимать во внимание три подхода к оценке - экспертный, индикаторный и эмпирический - и соответствующим образом формировать государственную политику в сфере оценки программ. Пока, к сожалению, мы наблюдаем как барьеры между этими подходами мешают прагматично выбирать оптимальный вариант оценки, исходя из задания (вопросов) и ограничений. А барьеры-то существуют, в том числе, как междисцплинарные, например, между экономикой и социологией. 
Очень признателен коллегам из киевской Академии госуправления за приглашение принять участие в их конференции в столь непростое время. Особая благодарность - главе Украинской ассоциации оценивания Ирине Кравчук. 
Было непривычно выступать перед камерой и видеть только небольшую часть аудитории. Но, наверное, надо привыкать, т.к. 21-й век! 

четверг, 15 мая 2014 г.

Ассоциация специалистов по оценке программ и политик начинает работу

Сегодня официально объявлено о начале деятельности Ассоциации специалистов по оценке программ и политик (АСОПП) в России. Открыт прием членов. Подробнее ознакомиться с планами АСОПП и условиями вступления можно на сайте Ассоциации

вторник, 13 мая 2014 г.

Прощание с легендой

Оценка программ - относительно молодая дисциплина, поэтому мы оказались современниками многих ее основоположников. В этом нам очень повезло: мы можем их слушать, задавать вопросы, следить за ходом их мысли. Но время неумолимо.
9 мая 2014 года в возрасте 90 лет ушел из жизни Дональд Киркпатрик - человек-легенда. В возрасте 35 лет (в 1959 году) он предложил четырехуровневую модель оценки тренинговых (обучающих) программ, которая стала канонической и так с тех пор и называется "моделью Киркпатрика". Это было удивительным озарением. Модель оказалась, с одной стороны, достаточно простой, а с другой - органичной и универсальной. Несмотря на то, что изобретение его жизни было посвящено оценке, Киркпатрик всегда относил себя к профессиональному сообществу людей, занимающихся тренингами и организационным развитием. Он был активным членом и - какое-то время - президентом крупнейшей профессиональной Ассоциации специалистов по тренингу и развитию (ASTD), которая теперь переименована в Ассоциацию развития талантов (ATD). Он создал семейный бизнес Kirkpatrick Parnters, которым теперь занимаются его дети. Он написал десятки статей и провел немыслимое количество тренингов. Все его книги стали бестселлерами.
А еще Дон, как его называли коллеги и близкие, любил в свободное от тренингов время участвовать в музыкальных коллективах, руководил церковным хором и писал песни. Вот послушайте здесь.
Фотография скопирована с сайта ASTD.

Глав субъектов РФ перестанут оценивать по результатам ЕГЭ

Газета.ru сообщает, что глав субъектов РФ теперь не будут оценивать по результатам ЕГЭ. Догадались, почему? Правильно, имело место масштабное манипулирование значением этого показателя.
Цитирую: "Из оценки эффективности работы губернаторов убрали результаты ЕГЭ по региону. Соответствующий указ подписал Владимир Путин. По словам экспертов, именно этот критерий повышал коррупционную составляющую ЕГЭ: местным властям было невыгодно, чтобы школьники получали низкие баллы, из-за чего учителя помогали решать школьникам задания, которые зачастую появлялись за несколько дней до экзамена.
... Чтобы повысить результаты ЕГЭ, губернаторы начинали давить на региональные органы управления образованием, а те, в свою очередь, на директоров школ, которые пытались переложить ответственность на учителей.
Происходили различные махинации, чтобы школьники могли лучше сдать ЕГЭ, вплоть до «сливов» заданий предстоящих экзаменов в интернет. Кроме того, учителя могли решать ЕГЭ за школьников или давать им готовые результаты, зачастую закрывали глаза на использование шпаргалок. Благодаря всему этому школьники получали более высокие баллы за экзамен".

среда, 7 мая 2014 г.

Основная литература

В российских университетах активно внедряются учебные курсы, связанные с оценкой программ и политик, и это, конечно, очень хорошо. Вот и Казанский федеральный университет опубликовал программу дисциплины "Анализ и оценка государственных программ и отраслевых политик" (спасибо Дмитрию Павлову за ссылку!). Пока таких программ немного, и указанный документ - вне всякого сомнения - представляет ценность для всех, кто думает о разработке подобных курсов.

У меня к создателям казанского курса возникло два вопроса:

1) Не использовались ли при разработке данного курса какие-либо публикации, на которые в Программе нет ссылок? При прочтении программы состояние дежавю несколько раз у меня возникало.

2) По какому принципу выбирались источники в раздел "Основная литература"?
Вот книги, включенные в этот раздел:
- Бильчак В.С., Инновационные подходы устойчивого развития региона в условиях трансграничного сотрудничества.- Калининград; БФУ, 2009.- 172 с.
- Юсупова Г.Ф.Теория отраслевых рынков: практикум.- М.; ВШЭ, 2012.- 281 с.
- Попова О.В., Политический анализ и прогнозирование: Учебное пособие.- М.; Аспект-
Пересс, 2011.- 466 с.

Как ни странно, здесь нет ни одной публикации, посвященной именно оценке программ, хотя такие публикации на русском языке существуют. Этих публикаций нет также в дополнительной литературе и в перечне рекомендованных интернет ресурсов. Студентам придется изучать новую дисциплину, пользуясь литературой, имеющей опосредованное отношение к содержанию курса. По крайней мере, к значительной его части. Мне такой подход кажется странным. А вам? 

четверг, 1 мая 2014 г.

Про результаты есть, а про систему - нет

На сайте Минтруда размещена информация о «О выполнении Плана мероприятий по формированию независимой системы оценки качества работы организаций, оказывающих социальные услуги, на 2013-2015 годы, утвержденного распоряжением Правительства Российской Федерации от 30 марта 2013 г. № 487-р, и предложениях по улучшению качества предоставляемых услуг, подготовленных совместно с заинтересованными общественными организациями в рамках проведения независимой оценки качества работы организаций социальной сферы». В этом документе есть сведения о том, сколько регионов охвачено системой независимой оценки; какие нормативные документы приняты на уровне регионов; какие есть примеры результатов оценки; какие шаги предприняты для улучшения качества по результатам оценки. 
К сожалению, в данном документе нет описания того, как выглядит новая система независимой оценки. Кроме упоминания общественных советов, создаваемых органами исполнительной власти для проведения независимой оценки, про систему оценки нет информации. А ведь именно от того, как выстроена система, зависит качество ее работы. Интересно, можно где-то об этом узнать поподробнее?