воскресенье, 18 ноября 2012 г.

О новизне

Как-то один из ветеранов Американской ассоциации оценки в беседе со мной посетовал на то, что на протяжении двух десятилетий он посещает конференции, на которых одни и те же люди говорят примерно об одном и том же. Полагаю, коллега, в тот момент просто сильно устал, потому что уже на следующей конференции он был полон энтузиазма.
Тема, однако, актуальна. Речь идет о готовности и способности людей воспринимать новое.
Несколько лет тому назад мне пришлось выступать перед весьма авторитетной аудиторией, состоявшей, в основном, из вузовских преподавателей социологии, сплошь кандидатов и докторов наук. В оценке программ активно используются методы социологического исследования, поэтому меня и пригласили выступить на той встрече. В краткой дискуссии, последовавшей за моим выступлением, коллеги дали понять, что не услышали от меня совершенно ничего нового и что они не просто давно знают об оценке программ, но и занимаются ей сами,  а также преподают ее своим студентам. Это, естественно, не соответствовало действительности: коллеги распознали в моем выступлении знакомые сюжеты, но не увидели за ними новизны.
Подобных примеров восприятия нового можно было бы привести достаточно много. Люди склонны к критическому мышлению и достаточно консервативны, что, само по себе, хорошо. Проблема заключается в том, чтобы существовал здоровый баланс между консерватизмом и готовностью увидеть новое, которое, как правило, проявляется не в виде революционных фундаментальных теорий, а в виде идей, дополняющих уже существующее знание, расширяющих его понемножку, шаг за шагом. «Прорывы», конечно, бывают, но редко. Поэтому и развитие дисциплины, и профессиональный рост специалистов существенно зависят от восприимчивости профессионального сообщества и его членов к относительно небольшим инновациям.
Замечу, что чем опытнее становится человек и чем больше он/а знает, тем больше риск потери чувствительности к новому.

вторник, 13 ноября 2012 г.

Свежая публикация по созданию национальных систем оценки

Группа оценки ООН (United Nations Evaluation Group - UNEG) сегодня объявила о размещении на своем сайте новой книжки, название которой можно перевести с английского как "Развитие национального потенциала в сфере оценки: практические советы по формированию национальных систем оценки". Насколько мне известно, подобных публикаций по данной теме раньше не было. Сборники выступлений на конференциях - не в счет, т.к. информация в них не систематизирована. В данном же случае мы получили настоящую книгу, представляющую собой отчет рабочей группы, изучавшей проблему формирования национальных систем оценки по заданию UNEG. Отличительными особенностями книжки являются подробные списки литературы по каждому разделу, а также многочисленные полезные приложения, в которых имеются ссылки на открытые интернет-ресурсы.

понедельник, 12 ноября 2012 г.

Кого приглашать для проведения оценки: эксперта в предметной области или специалиста по оценке?

Время идет, а тема остается актуальной. По-прежнему крайне сложно найти для оценки программы консультанта, который бы являлся экспертом в соответствующей предметной области и владел методологией оценки. В результате многие организации нанимают экспертов, не очень хорошо знакомых с методологией проведения оценки программ. Потом они жалуются на низкое качество оценки. Я к этой теме уже обращался ранее, потому повторяться не буду, а добавлю аргументацию.
Полагаю, тут многое зависит от вида оценки:
- если нужно провести экспертизу, то главное - выбрать правильных экспертов в соответствующей предметной области,
- если же нужно провести оценку, основанную на эмпирическом исследовании, то главное - выбрать людей, которые владеют методологией проведения такого исследования (умеют собирать и анализировать эмпирические данные), то есть в этом случае важнее знания в области оценки программ. Это, естественно, не исключает привлечения экспертов (см. предыдущий пост на эту тему).

пятница, 9 ноября 2012 г.

Оценка проектов, направленных на защиту прав и интересов ("эдвокаси")

В конце 90-х  годов мы пытались найти методики оценки программ, направленных на отстаивание прав и интересов (advocacy). Практически ничего не нашли. Сейчас снова возник такой же вопрос, и я обнаружил, что тема стала весьма популярной, и что за последнее десятилетие появился целый ряд интересных публикаций и даже руководств по оценке именно таких программ и проектов (пока все на английском). Приведу четыре ссылочки для интересующихся данной проблемой:
  1. A Practical Guide to Advocacy Evaluation. Innovation Network, Inc. Не очень объемный хорошо структурированный документ.
  2. A User’s Guide to Advocacy Evaluation Planning. Harvard Family Research Project. Если читаете по-английски, сайт этого проекта - отличный ресурс по оценке программ.
  3. A Guide to Measuring Advocacy and Policy. Руководство опубликовано Annie E. Casey Foundation, который вообще много интересных публикаций подготовил по оценке и управлению программами.
  4. Advocacy Impact Evaluation. Статья Майкла Пэттона. Надо читать, потому что автор - гуру.
Удивительно, как быстро заполнился некоторый пробел в знании об оценке! По всей вероятности, это связано еще и с тем, что доноры стали активнее поддерживать "эдвокаси"-программы, и, естественно, появился запрос на их оценку.