вторник, 12 августа 2025 г.
Эффект бабочки
пятница, 4 апреля 2025 г.
Об оценке в очередном эпизоде подкаста ИРСУ «Чейные дети»
Беседуем с Мариной Ивановой об оценке в 12 выпуске подкаста «Чейные дети» (его поддерживает Институт развития семейного устройства - ИРСУ). Этот эпизод о том, что такое оценка социальных программ, почему это не проверка, а пространство для развития. Как оценка может быть связана не с внешним контролем, а с внутренней честностью и какие нужны качества человеку, который может всерьёз говорить об эффективности социальной деятельности.
пятница, 25 августа 2023 г.
SURVEYMONKEY: доступ ограничен
среда, 16 ноября 2022 г.
Всегда ли прав клиент?
Основа качественной услуги – это доверительные отношения между консультантом и клиентом, которые в психологии называют специальным термином «раппорт». Если такой контакт установить не удаётся, а контракт на проведение оценки все равно заключается, то неправы оба: и консультант, и клиент.
При постановке задачи на проведение оценки правило «клиент всегда прав» работает в том смысле, что оценка должна быть ориентирована на информационные потребности клиента. Но при этом у консультанта не должно возникать проблем, связанных с соблюдением профессиональных стандартов, принципов и этики. Например, если ставится задача провести оценку с заранее известным результатом, то клиент неправ.
При планировании оценки клиент будет совершенно прав, если попросит консультанта обосновать выбор тех или иных методов и инструментов, укажет на существующие ограничения. Но он будет неправ, если станет «продавливать» использование определенных подходов несмотря на обоснованную аргументацию их недостатков со стороны консультанта. Например, бывают такие группы, узнать мнение которых необходимо, но сделать это с помощью анкетирования невозможно в силу особенностей групповой культуры и/или специфики поставленных вопросов.
При проведении оценки клиент будет прав, если сделает все необходимое для обеспечения доступа консультанта к согласованным с ним источникам информации и для создания благоприятных условий для получения такой информации. Соответственно, если клиент, к примеру, будет настаивать на том, чтобы он сам либо его представитель сопровождали консультанта во время проведения интервью, то это не будет способствовать созданию благоприятных условий. В этом случае клиент будет неправ.
Клиент будет прав, если попросит регулярно информировать его о ходе оценки. Но он будет сильно неправ, если станет настаивать на том, чтобы консультант делился выводами и рекомендациями до того, как будут завершены сбор и анализ информации. Известно, что выводы, сделанные на основе неполных данных, очень часто оказываются ошибочными.
Чаще всего, клиент не стремится активно участвовать в анализе данных. Но он будет прав, если предложит свою помощь в обсуждении и интерпретации полученных данных. Естественно, для этого, данные должны быть обработаны и представлены в удобном для обсуждения виде. Обычно такое обсуждение происходит в момент представления клиенту проекта отчета по результатам оценки. Тогда же обсуждаются выводы и рекомендации. Клиент будет неправ, если станет требовать от консультанта включить в отчет выводы либо рекомендации, с которыми консультант не согласен.
Таким образом, клиент бывает прав не всегда. А конструктивное разрешение возникающих в ходе оценки противоречий зависит от того, с чего я начал, а именно от установления и поддержания позитивных доверительных отношений между клиентом и консультантом по оценке.
PS Люди, занятые в сфере услуг, давно усомнились в формуле «клиент всегда прав». Они утверждают, что ее нельзя понимать и применять буквально: «Слова «клиент всегда прав» означают, что, заведение должно делать всё, чего он пожелает, сотрудники не должны иметь ни мнения, ни достоинства, и в любых конфликтах всегда являются побежденной стороной. Естественно, при воплощении в жизнь эта фраза убивает заведение, и по злой иронии делает обслуживание хуже».
пятница, 24 декабря 2021 г.
Презентация для лифта PROОЦЕНКУ
Как сделать "презентацию для лифта" об оценке программ и проектов? Как рассказать неподготовленному человеку о том, что такое оценка и почему она важна? Пусть даже дело происходит не в лифте и время не ограничивается 1-2 минутами.
Мне приходилось делать это много раз и, честно говоря, с переменным успехом :) Например, интересно объяснять это офицеру на паспортном контроле при пересечении границы другой страны. Диалог примерно такой:
Офицер: Цель Вашего визита?
Я: Бизнес.
Офицер: Какой бизнес?
Я: Участие в конференции.
Офицер: Что за конференция?
Я: По оценке (evaluation).
Офицер: А что такое оценка?
Здесь возникает пауза, потому что я начинаю лихорадочно думать о том, какое из известных мне определений сказать. Или, может, несколько определений предложить? Но тогда придется немного углубиться в обсуждение отличий между этими определениями. И еще: надо ли говорить офицеру, что пока нет консенсуса относительно определения, что есть разные школы оценки. С учетом большой очереди позади меня в то же окошко...
Умение хорошо рассказать об оценке, конечно же, очень важно для всех, кто стремится оценку развивать и продвигать. Возможно, даже нужны разные подходы для рассказа представителям разных целевых групп - НКО, представителям госструктур, студентам университета, журналистам. Это тема возникла на заключительной встрече участников проекта "Ступени эффективности", реализованного новосибирским ИНА-Центром при поддержке Фонда президентских грантов. Мы решили вынести ее на обсуждение на следующем заседании клуба PROОЦЕНКУ, которое пройдет онлайн во второй четверг (13) января 2022 года с 11 до 12.30 мск. Приглашение будет размещено в группе "Проектирование и оценка в социальной сфере" сразу после новогодних праздников. Пока можно просто в ежедневник время записать.
понедельник, 26 июля 2021 г.
Как мы стали заниматься оценкой
- К середине 90-х годов мы (Компания "Процесс Консалтинг") определяли свою специализацию как "организационное развитие" (organization development). Когда один из наших клиентов обратился к нам с запросом на проведение оценки проекта, оказалось, что это в чем-то сродни организационной диагностике, которую мы проводить умели.
- Когда КАФ (тогда еще CAF) решил провести один из первых в России семинаров по оценке для лидеров НКО (это тоже было в середине 90-х), пригласили двух зарубежных специалистов. Случилось так, что один из них заболел накануне отъезда, и меня попросили поассистировать Сaре дел Туфо (Sarah del Tufo) из Великобритании. Семинар прошел хорошо. Наше профессиональное сотрудничество с Сарой продолжалось потом много лет. Дружим до сих пор.
- Сара помогла тогда с приобретением наших первых книжек по оценке. Среди них была "Практическая оценка" (Practical Evaluation) Майкла Пэттона. Книга произвела на меня сильное впечатление. Уникальная особенность Майкла в том, что он пишет и говорит так, что хочется сразу идти и делать :)
- Мы понимали, что спрос на оценку будет расти. Потребность в ней была совершенно очевидна. А нам надо было специализироваться.
вторник, 1 сентября 2020 г.
Консультанты против заниженного бюджета оценки
Не могу не задать читателям этого блога риторического вопроса: как вы думаете, стали бы организации сокращать расходы на то, что им очень нужно или даже жизненно необходимо?... Но речь не об этом.
Сегодня произошло редкое событие. В ответ на просьбу представителя Международной организации гражданской авиации / ICAO (одна из структур ООН) распространить приглашение к участию в тендере на проведение оценки два очень известных консультанта из Канады написали открытые ответы. Суть обоих ответов сводится к тому, что неприлично такие предложения рассылать (денег мало). Приведу цитаты из обоих писем, чтобы не быть голословным.
"Просмотрел ваше сообщение. После уплаты налогов (нижний предел) и эквивалента отчислений (стандарт) дневная ставка составит от 80 до 150 долларов США... [Такая] ставка профессионального вознаграждения не соответствует должностным требованиям. Таким образом, я не только не заинтересован сам, но и не хочу делиться этим со своими коллегами"
"...Если быть дипломатичным, можно сказать так: нелепо предлагать уровни гонораров, идентичные тому, что мне платили 40 лет назад в самом начале моей карьеры консультанта. Нет абсолютно никаких причин для распространения такого запроса... Консультанты либо не получат адекватного вознаграждения, либо не будут иметь необходимой квалификации"
В первом письме автор предлагает "сделать шаг назад" и пересмотреть условия оплаты.
Как вы думаете, какой была реакция представителя ICAO? Вот только что пришло: "Спасибо за комментарий! Сейчас скорректируем".
Не представляю, чем эта дискуссия может закончиться. Открытые письма продолжают поступать...
пятница, 24 января 2020 г.
Больше отдыхать
среда, 18 сентября 2019 г.
Не заметил :)
среда, 4 сентября 2019 г.
Команда консультантов
- Большой объем работ, с которым невозможно справиться одному человеку в разумные сроки.
- Потребность в специальной экспертизе. В этом случае в команду могут быть включены люди, компетентные в определенной области, но не обязательно имеющие опыт проведения оценки программ.
- Необходимость встраивания оценки в специфический контекст. Например, при проведении оценки зарубежным специалистом, важно иметь в команде местного специалиста, который не только не нуждается в переводчике для сбора данных, но и хорошо ориентируется в особенностях ситуации, чувствует и понимает такие вещи, которые зарубежному специалисту недоступны.
пятница, 19 июля 2019 г.
Консультант как горный гид
четверг, 4 апреля 2019 г.
К сожалению, точка зрения специалистов по оценке не может быть принята во внимание
пятница, 11 января 2019 г.
четверг, 14 сентября 2017 г.
Юридическое лицо
понедельник, 10 октября 2016 г.
среда, 28 сентября 2016 г.
ITC ILO
Вчера в очередной раз убедился в том, что Шерлок Холмс намного более популярен в России, чем в других странах. Полагаю, мы и Англию обойдем по этому показателю скоро. В наших группах достаточно назвать рассказ А. Конан Дойла "Пестрая лента", и всем все понятно. Здесь же приходится делать подробное вступление прежде чем перейти к тому, как Холмс анализирует факты (это одно из моих любимых учебных заданий). Большой плюс - возможность использования оригинальных текстов как в случае с Холмсом, так и про оценку (рабочий язык - английский). Все-таки с английскими терминами в оценке все намного лучше устоялось, чем в русском варианте. И очень много ресурсов в интернете доступно. Кстати, для каждой группы здесь делают отдельную интернет-страничку, куда загружаются разные материалы, ссылки, фотографии и т.д. Отличная идея!
среда, 25 мая 2016 г.
20 лет спустя
пятница, 18 марта 2016 г.
Был конь да изъездился
четверг, 26 ноября 2015 г.
Новое поколение выбирает...
суббота, 28 декабря 2013 г.
Провожая 2013 и встречая 2014...
В 2013 году нам пришлось поработать в Азербайджане, Армении, Грузии, Казахстане, Кыргызстане, России и Таджикистане. Страны расположил по алфавиту, но больше всего работы было в России, конечно.
Как значимые события отмечу конференцию Международной сети "Оценка программ" в Кишиневе (Молдова) и конференцию Американской ассоциации оценки в Вашингтоне.
Утверждение 2015 года в качестве Международного года оценки ООН считаю одним из важнейших глобальных событий уходящего года и большим достижением международного профессионального сообщества. Очень приятно, что к этому приложила руку и моя коллега Наталья Кошелева - в качестве президента Международной организации сотрудничества в сфере оценки и со-председателя проекта EvalPartners.
В 2013 году, к сожалению, не удалось создать российскую ассоциацию оценки программ и политик, а также возобновить выпуск журнала "Проектирование, мониторинг и оценка". Оба этих дела переходят в повестку 2014 года. Работа продолжается в обоих направлениях, и я очень надеюсь на успех.
В начале следующего года ожидаем публикацию пособия по "теории изменений", в подготовке которого мы приняли активное участие. Весной вместе с Натальей Кошелевой и Владимиром Балакиревым планируем поучаствовать в проведении учебных курсов по оценке программ для студентов Высшей школы экономики и Московской высшей школы социальных и экономических наук. В сентябре должна пройти интересная конференция Международной сети "Оценка программ" в Бишкеке (Кыргызстан). Есть все основания предполагать, что в нашем регионе в наступающем году продолжится развитие национальных объединений в сфере оценки программ и активизируется сотрудничество между ними.
Хотел бы поздравить всех гостей моего блога с наступающим Новым годом!
Пусть этот год будет удачным для вас во всех отношениях!
До встречи!





