17.09.2026. Тема заседания №59: Самооценивание и внешняя оценка.
Вопрос о том, кто лучше видит ситуацию — внешний консультант или сама организация, — остается одним из самых дискуссионных в оценке. Участники не искали единственно правильный ответ, а разбирали, где находятся сильные стороны каждого подхода, в чем их ограничения и как они могут дополнять друг друга.
Внешняя оценка: свежий взгляд и цена независимости.
Среди главных плюсов внешней оценки участники назвали непредвзятость и взгляд со стороны. Внешний специалист не находится «на чьей-либо стороне», видит то, что сотрудники уже перестали замечать, приносит опыт оценки других программ. Постороннему человеку иногда больше доверяют: и команда, и благополучатели могут быть откровеннее. Если оценщика приглашает сама НКО, у организации больше возможностей контролировать процесс.
Ограничения тоже очевидны. Внешнему эксперту не всегда хватает погружения во внутренний контекст, есть риск неточного понимания специфики. Если рынок оценки в стране не развит, найти компетентного консультанта сложно. Подготовка и проведение требуют времени. Отдельный стресс — сама ситуация внешней оценки: она может пугать и НКО, и донора. Кроме того, если оценку заказывает донор, НКО не всегда может влиять на техническое задание, а от его адекватности зависит многое.
Как готовиться, если внешняя оценка заказана донором.
Участники обсудили, что подготовка нужна, но она не должна превращаться в «показательные выступления». Главное — понять рамки: цель, границы, методологию, вопросы и критерии. Полезно запросить их у донора и оценщика, а также прояснить возможные последствия оценки.
В малых группах назвали конкретные шаги:
— выделить время для встреч с оценщиком, помещение, найти документы;
— поговорить с командой, объяснить, что происходит, но не давать установок «что говорить»;
— назначить контактное лицо и поддерживать коммуникацию с консультантом;
— подготовить группы респондентов, волонтеров для сбора данных, материалы и документы;
— провести самооценку до внешней оценки, чтобы понимать свои сильные и проблемные зоны;
— не путать оценку проекта с административной проверкой;
— познакомиться с оценщиком как с человеком, сообщить о специфике организации.
Отдельно прозвучало, «как не надо»: давать команде установку, что отвечать, и пытаться показать только хорошее. Это снижает ценность оценки и может исказить результаты.
Самооценивание: знание изнутри и риск предвзятости.
Самооценивание привлекает меньшими затратами, гибкостью и контролем. Организация сама выбирает время, может менять метрики по ходу, быстрее использовать результаты. Сотрудники знают программу, аудиторию, свои ошибки; доверие внутри команды помогает собрать глубокие данные. А специалист, который проводит самооценивание, растет профессионально.
Но ограничения серьезны. Трудно быть объективным к себе: есть риск переоценить или недооценить результаты. Личные отношения и заинтересованность могут провоцировать социально желательные ответы. Самооценивание может вскрыть скрытые конфликты и обиды. Его сложнее встроить в график, не всегда хватает компетенций, а внешнюю оценку часто ценят выше, потому что на нее затрачено больше ресурсов. В маленьких НКО и на малых территориях самооценивание особенно трудно.
Что делать с ограничениями самооценивания?
Участники предложили несколько практических решений:
— повышать компетенции в оценке;
— выделить ответственного за оценку с административным ресурсом;
— вписать самооценивание в процессы и календарь организации;
— чтобы руководитель не проводил оценку сам;
— чтобы у проводящего не было открытых конфликтов в коллективе;
— использовать анонимные инструменты и проективные методики;
— формулировать вопросы не «вы плохо работаете», а «как нам стать лучше»;
— стремиться к коллективному решению, а не к оценке «сверху»;
— бороться с желанием сообщать только хорошее.
Не противопоставлять, а сочетать.
Общий вывод заседания: внешняя оценка и самооценивание — не конкуренты, а взаимодополняющие инструменты. Самооценивание помогает лучше понять себя, подготовиться и увидеть внутренние процессы. Внешняя оценка дает свежий взгляд, независимость и сравнение с другими. В идеале они работают в связке. Участники также вспомнили оценку с участием заинтересованных сторон (participatory evaluation), где пользователи результатов, сотрудники и благополучатели вовлечены в процесс — это еще один способ соединить внутреннее знание и внешнюю валидность.
Следующее заседание клуба PROOЦЕНКУ состоится в четверг 15 октября 2026 года с 11:00 до 12:30 мск. Тема будет объявлена дополнительно. Участие бесплатное, приглашение на Zoom получат зарегистрированные участники.
Ссылка на запись заседания
16.07.2026. Тема заседания №58: Учет контекста в оценке.
16 июля 2026 года состоялось очередное онлайн-заседание Клуба PROОЦЕНКУ, посвящённое учёту контекста при проведении оценки социальных проектов. Модератором встречи выступил Владимир Балакирев (Компания «Процесс Консалтинг»).
Участники обсудили, почему контекст нельзя игнорировать, к каким ошибкам приводит его недооценка и как грамотно встроить анализ контекста в оценочную практику.
Открывая встречу, Владимир Балакирев обозначил ключевую метафору из материалов заседания: контекст — это не просто внешние обстоятельства, а активная сила, которая определяет, «куда попадут семена и смогут ли они там прорасти». Без учёта контекста любые выводы оценки рискуют оказаться неполными или даже ошибочными.
Участники согласились, что в российской практике оценки контекст часто воспринимается как нечто вторичное — «фон», который можно не анализировать. Однако реальные кейсы показывают обратное: именно контекст задаёт рамки для интерпретации данных и определяет применимость результатов.
В ходе дискуссии были выделены несколько ключевых групп факторов, которые обязательно должны учитываться при планировании и проведении оценки:
- Демографические и социальные — состав целевой группы, уровень образования, культурные нормы, языковые особенности. Участники привели примеры, когда неучтённые культурные различия приводили к искажению ответов респондентов.
- Организационные — структура и стабильность организации-исполнителя, внутренние процессы, кадровый потенциал. Это влияет на гибкость программы и доступность данных.
- Экономические и ресурсные — ограниченность бюджета, доступность транспорта и связи, особенно актуально для отдалённых территорий.
- Политические и нормативные — законодательные ограничения (например, при сборе данных в школах), геополитическая обстановка в приграничных районах.
- Исторические — предыдущий опыт реализации подобных проектов, память о прошлых оценках, доверие или недоверие к оценщикам.
Особый интерес вызвало обсуждение психологического контекста: настроенность заказчика оценки, его ожидания «красивой картинки», а также профессиональные установки самого оценщика. Участники подчеркнули, что оценщику важно осознавать свои собственные предубеждения и быть готовым воспринимать реальность, которая не совпадает с его опытом.
В малых группах участники смоделировали ситуации, к которым может привести игнорирование контекста:
- выбор нерелевантных вопросов для оценки;
- неверная интерпретация целей программы;
- сбор данных с использованием терминов, непонятных целевой группе;
- потеря ключевых стейкхолдеров, которые могли бы использовать результаты;
- представление результатов в форматах, недоступных для доминирующей культуры или местного сообщества.
Один из участников поделился опытом оценки проекта в отдалённом районе, где отсутствие устойчивой мобильной связи сделало невозможным использование онлайн-опросов, что потребовало срочной смены метода сбора данных. Этот кейс наглядно продемонстрировал, что технологический и физический контекст должны быть проанализированы ещё на этапе планирования.
Оживлённую дискуссию вызвал вопрос о том, где выше вероятность неучёта контекста — при внешней оценке или при самооценивании.
Мнения разделились:
- Внешний оценщик рискует не заметить тонких культурных и исторических нюансов, если он недостаточно погружён в среду. Однако он может быть более объективен и менее подвержен внутриорганизационным «слепым пятнам».
- Внутренняя оценка даёт глубокое понимание организационного контекста, но несёт опасность субъективизма и желания представить результаты в выгодном свете.
Участники сошлись на том, что идеальный вариант — сочетание подходов, при котором внешний оценщик работает в тесном контакте с «национальными экспертами» — представителями местного сообщества, хорошо знающими специфику.
По итогам обсуждения были сформулированы несколько практических советов, как не упустить значимые характеристики контекста:
- На этапе согласования технического задания задать заказчику вопрос: «При каких условиях реализация проекта была бы принципиально невозможна или потребовала бы кардинальных изменений?» Это помогает выявить критические факторы.
- Создавать чек-листы характеристик контекста для себя как для оценщика (по целевой группе, организации, территории и т.д.).
- Привлекать «нейтральных» экспертов или коллег со стороны для «взгляда со стороны» на свои выводы.
- Наблюдать за собственными «красными флажками» — моментами, когда что-то кажется нелогичным или вызывает недоумение. Это часто указывает на неучтённый культурный или организационный нюанс.
- Использовать триангуляцию данных и методов, чтобы компенсировать возможные искажения, связанные с контекстом.
Встреча завершилась традиционным обменом мнениями и планами на будущее. Участники отметили, что тема контекста требует дальнейшего углубления, и выразили надежду на продолжение дискуссии в рамках следующих заседаний.
Напоминаем: август — каникулы Клуба. Следующая встреча состоится 17 сентября 2026 года с 11:00 до 12:30 (мск). Тема будет объявлена дополнительно на сайте Клуба.
Ссылка на запись заседания
