«Дизайном» оценки называют процесс и результат планирования оценки. Дизайн оценки состоит в переходе от вопросов задания к тому, как мы собираемся получить ответы на них. Использование термина «планирование» для нас более привычно, но мы предлагаем в этот раз говорить о «дизайне» именно потому, что планирование оценки – процесс творческий. Чем-то он сродни искусству. Акцент, как всегда, постараемся сделать на само-оценивании.

Мы планируем обсудить следующие вопросы:
— Как планируется оценка?
— На что следует обращать внимание при планировании оценки?
— В какой мере на стадии дизайна оценки можно и нужно сочетать стандартные решения с творческими?
— Какие существуют чек-листы применительно к дизайну оценки?

В ходе обсуждения обменяемся мнениями, опытом и поделимся практическими рекомендациями. Часть заседания традиционно проведем в малых группах, что позволит всем пообщаться более активно.

Модератор встречи – Алексей Кузьмин (Компания «Процесс Консалтинг»).

Участие во встрече — бесплатное.

Регистрация на сайте клуба (кнопка «Регистрация на ближайшее заседание»).

Приглашение на ZOOM-конференцию будет отправлено всем зарегистрированным участникам.

Следующее заседание пройдет онлайн в четверг 11 июля 2024 года с 11.00 до 12.30 мск. Тема этого заседания будет объявлена дополнительно.

Онлайн-клуб – это инициатива Альянса PROОЦЕНКУ.
Цель Альянса – развитие оценки в социальной сфере, встраивание оценки в деятельность организаций.
Создатели Альянса PROОЦЕНКУ:
• РБОО «Архангельский Центр социальных технологий «Гарант»
• ООО «Компания «Процесс Консалтинг»
• Фонд «Сибирский центр поддержки общественных инициатив»
Встреча клуба PROОЦЕНКУ состоится в рамках проекта «Формирование экосистемы обучения и просвещения в области оценки в социальной сфере», который выполняется Ассоциацией ИнА-Центр в партнерстве с Альянсом PROОЦЕНКУ при поддержке Фонда президентских грантов.

При проведении оценки проектов и программ часто используется анкетирование. Анкета – это документ, содержащий серию вопросов, необходимых для получения информации в соответствии с заданием на проведение оценки. Метод анкетирования предполагает не только наличие заранее определенного перечня вопросов, но и заранее заданные варианты (формы) ответов на каждый из этих вопросов. Важной характеристикой анкетирования является то, что респондент дает ответы на вопросы самостоятельно. Сегодня анкетирование проводится, по большей части, онлайн, хотя в отдельных случаях по-прежнему сохраняется необходимость использования бумажных анкет.

Мы планируем обсудить следующие вопросы:
— Каковы преимущества и ограничения анкетирования по сравнению с другими методами сбора данных?
— С какими трудностями мы сталкиваемся при проведении анкетирования и как мы их преодолеваем? Какую информацию легче, а какую сложнее получить с помощью анкетирования?
— Какие могут быть ошибки при использовании анкетирования и как их избежать? Как может выглядеть чек-лист для оценки анкеты?
— Каковы преимущества онлайнового анкетирования? В каких случаях нам все ещё может понадобиться бумажная анкета?
— Какие онлайновые платформы доступны сегодня для проведения анкетирования? Что мы о них знаем?

ВНИМАНИЕ!!! Если Вы планируете принять участие в этом заседании, Вы можете подготовить примеры анкет, фрагментов анкет или отдельных вопросов из Ваших либо чужих анкет, которые можно будет показать и обсудить. Их можно прислать заранее на адрес administrator@proocenku.club или просто принести с собой на заседание клуба.

В ходе обсуждения обменяемся мнениями, опытом и поделимся практическими рекомендациями. Часть заседания традиционно проведем в малых группах, что позволит всем пообщаться более активно.

Модератор встречи – Владимир Балакирев (Компания «Процесс Консалтинг»).

Участие во встрече — бесплатное.

Регистрация на сайте клуба (кнопка «Регистрация на ближайшее заседание»).

Приглашение на ZOOM-конференцию будет отправлено всем зарегистрированным участникам.

Следующее заседание пройдет онлайн в четверг 13 июня 2024 года с 11.00 до 12.30 мск. Тема этого заседания будет объявлена дополнительно.

Результаты оценки и их практическая польза во многом определяются постановкой задачи. Как сказал Дэвид Куперрайдер, автор метода позитивного исследования (appreciative inquiry), «мы живем в мирах, которые создаются нашими вопросами». Именно вопросы, на которые надлежит ответить, составляют основу содержательной задачи на проведение оценки. Остальное — дело техники. Вопросы эти должны отражать информационные потребности будущих пользователей результатов оценки. Опыт показывает, что сформулировать хорошие вопросы не так уж легко. Кроме того, постановка задачи при проведении само-оценивания или внутренней оценки имеет свою специфику.

Мы планируем обсудить следующие темы:
— Что следует включать в задание на проведение внутренней оценки или само-оценивания?
— Как организовать процесс формирования такого задания? Кто должен в нем участвовать?
— Почему нужны именно вопросы?
— Что такое «хороший вопрос» и как его сформулировать?
— Каковы распространенные ошибки при постановке задачи на проведение оценки и как их избежать?

В ходе обсуждения участники поделятся собственным опытом и практическими рекомендациями.

Как всегда, будет возможность задать друг другу вопросы и обменяться мнениями. Часть заседания традиционно проведем в малых группах, что позволит всем пообщаться более активно.

Модератор встречи – Алексей Кузьмин (Компания «Процесс Консалтинг»).

Участие во встрече — бесплатное.

Регистрация на сайте клуба (кнопка «Регистрация на ближайшее заседание»).

Приглашение на ZOOM-конференцию будет отправлено всем зарегистрированным участникам.

Следующее заседание пройдет онлайн в четверг 16 мая 2024 года с 11.00 до 12.30 мск. Тема этого заседания будет объявлена дополнительно.
Онлайн-клуб – это инициатива Альянса PROОЦЕНКУ.

Цель Альянса – развитие оценки в социальной сфере, встраивание оценки в деятельность организаций.
Создатели Альянса PROОЦЕНКУ:
• РБОО «Архангельский Центр социальных технологий «Гарант»
• ООО «Компания «Процесс Консалтинг»
• Фонд «Сибирский центр поддержки общественных инициатив»
Встреча клуба PROОЦЕНКУ состоится в рамках проекта «Формирование экосистемы обучения и просвещения в области оценки в социальной сфере», который выполняется Ассоциацией ИнА-Центр в партнерстве с Альянсом PROОЦЕНКУ при поддержке Фонда президентских грантов.

В этом году конференция АСОПП проводится уже десятый раз. Тема этого года перекликается с темой первой конференции: «Оценка программ и политик в России: становление профессии». В рамках конференции планируется, в том числе, обсудить, какой путь прошла оценка социальных программ и проектов как профессия за десять лет. Например, тема оценки программ в сфере детства активно обсуждалась уже на первой конференции АСОПП в 2015 году и продолжает активно развиваться и сегодня. Тема оценки качества жизни была впервые затронута на конференции 2018 года, а в прошлом году она стала центральной темой конференции АСОПП. Тема использования оценки в контексте социального предпринимательства впервые была поднята на конференции в 2018 году, и в 2023 году уже получился полноценный трек по этой теме. Тема оценки культурных проектов появилась в программе конференции только в 2022 году, но уже через год ее обсуждению был посвящен отдельный трек.

Кроме того, в рамках конференции планируется разговор о том, как мы, как профессиональное сообщество, видим возможные направления развития оценки программ и проектов в социальной сфере в нашей стране.

Информационными партнерами конференции АСОПП уже стали Агентство социальной информации, журнал «Позитивные изменения» и Журнал благотворительности. Лаборатория образовательных технологий «Четвертое измерение» поддерживает АСОПП pro bono разработкой визуала и лэндинга конференции.

Конференция состоится онлайн 15-16 октября 2024 года. Регистрационный взнос за участие в конференции не взимается.

Заявки на выступления принимаются до 1 июля 2024 года на сайте АСОПП.

Программа конференции будет опубликована 3 сентября 2024 года.

Сегодня в проведении оценки заявок на получение финансирования в рамках грантовых конкурсов на федеральном, региональном и местном уровнях принимают участие тысячи экспертов. Опыт показывает, что им приходится решать не только сугубо профессиональные вопросы, но и находить выход из ситуаций, которые можно охарактеризовать как этические дилеммы. Вероятно, наиболее распространенная из них – это принятие решения о наличии потенциального конфликта интересов у эксперта. Если такой конфликт существует, эксперту следует отказаться от оценки заявки. Но даже в такой, казалось бы, простой ситуации, все не так просто… А что, если эксперт не уверен, имеется ли у него конфликт интересов? А что, если эксперт считает, что конфликта интересов нет, а организатор конкурса считает, что конфликт есть? А как быть, если конфликт интересов возникает по ходу проведения экспертизы?

Эксперты грантовых конкурсов накопили достаточный опыт для того, чтобы сформулировать, как им следует себя вести в ситуациях сложного выбора. Теоретически можно было бы разработать соответствующий этический кодекс или принципы профессиональной деятельности для экспертов грантовых конкурсов. Тем более, что этические кодексы для экспертов, работающих в других сферах деятельности, существуют.

Мы планируем обсудить следующие вопросы:
— Какие существуют этические кодексы для экспертов в РФ и за рубежом?
— Кто и с какой целью их разработал?
— Какие основные положения они содержат?
— Нужен ли этический кодекс для экспертов, которые оценивают заявки на получение финансирования в грантодающих организациях?
— Кто мог бы такой кодекс разработать?
— Какие положения туда нужно включить?

Как всегда, у участников будет возможность задать друг другу вопросы и обменяться мнениями. Часть заседания традиционно проведем в малых группах, что позволит всем пообщаться более активно.

Модератор встречи – Владимир Балакирев (Компания «Процесс Консалтинг»).

Участие во встрече — бесплатное.

Регистрация на сайте клуба (кнопка «Регистрация на ближайшее заседание»).

Приглашение на ZOOM-конференцию будет отправлено всем зарегистрированным участникам.

Следующее заседание пройдет онлайн в четверг 11 апреля 2024 года с 11.00 до 12.30 мск. Тема этого заседания будет объявлена дополнительно.

Об опыте использования таких систем расскажет исполнительный директор ассоциации «Драйвер роста», член правления АСОПП Сергей Назаров (Белгород). Ассоциация осуществляет поддержку семей, воспитывающих детей с особыми потребностями. В структуре ассоциации некоторое время тому назад был создан Центр мониторинга. Сергей расскажет об использовании этим Центром BI-систем для проведения контекстных исследований, предпроектных экспресс-исследований и мониторинга проектов.

Как всегда, у участников будет возможность задать вопросы и обменяться мнениями.

Модератор встречи – Владимир Балакирев (Компания «Процесс Консалтинг»).

Участие во встрече — бесплатное.

Регистрация на сайте клуба (кнопка «Регистрация на ближайшее заседание»).

Приглашение на ZOOM-конференцию будет отправлено всем зарегистрированным участникам.

Следующее заседание пройдет онлайн в четверг 14 марта 2024 года с 11.00 до 12.30 мск. Тема следующего заседания будет объявлена дополнительно.

Онлайн-клуб – это инициатива Альянса PROОЦЕНКУ.
Цель Альянса – развитие оценки в социальной сфере, встраивание оценки в деятельность организаций.
Создатели Альянса PROОЦЕНКУ:
• РБОО «Архангельский Центр социальных технологий «Гарант»
• ООО «Компания «Процесс Консалтинг»
• Фонд «Сибирский центр поддержки общественных инициатив»
Встреча клуба PROОЦЕНКУ состоится в рамках проекта «Формирование экосистемы обучения и просвещения в области оценки в социальной сфере», который выполняется Ассоциацией ИнА-Центр в партнерстве с Альянсом PROОЦЕНКУ при поддержке Фонда президентских грантов.

Программа для «молодых» профессионалов — «Школа оценки».

К участию приглашаются оценщики, имеющие небольшой опыт в оценке:
• использующие в работе оценку;
• перед кем стоят конкретные задачи, связанные с оценкой;
• кто не участвовал ранее в нашем обучении оценке.

Обучение будет проходить в три этапа, суммарно 144 часа:
1) очное обучение в Москве, 26-28 февраля 2024 года, отель «Аэростар» (24 часа, лекции и практика);
2) онлайн-обучение (вебинары — лекции и практика) и самостоятельная работа при сопровождении экспертов по оценке;
3) очное обучение, три дня (24 часа, лекции и практика).

Дедлайн приема заявок 1 февраля 2024 года.

Подать заявку на участие.

Программа для начинающих оценщиков — «Лицей оценки».

К участию приглашаются специалисты, начинающие свой путь в оценке.
Обучение будет проходить онлайн: вебинары с преподавателем и выполнение практических работ в группе (встречи 2 раза в неделю, вторники и четверги) и самостоятельная работа над заданиями, суммарно 33 часа.

Дедлайн приема заявок 16 февраля 2024 года.

Подать заявку на программу.

Количество мест на каждую программу ограничено 25 участниками.

Программы обучения реализуются в рамках проекта «Формирование экосистемы обучения и просвещения в области оценки в социальной сфере», поддержанного Фондом президентских грантов.

На юбилейном 30-м заседании Клуба мы хотим подвести некоторые итоги его работы и обсудить, в каких направлениях продолжать работу клуба в будущем.

Мы планируем обсудить следующие вопросы:

— Что полезного для себя и для своих организаций мы получаем от участия в обсуждениях Клуба? Какие темы были наиболее интересными?

— Какие темы важно было бы обсудить в 2024 году?

— Как стоит изменить или улучшить обсуждения на заседаниях клуба?

Модератор встречи – Владимир Балакирев (Компания «Процесс Консалтинг»).

Участие во встрече — бесплатное.

Регистрация на сайте клуба (кнопка «Регистрация на ближайшее заседание»).

Приглашение на ZOOM-конференцию будет отправлено всем зарегистрированным участникам.

Следующее заседание пройдет онлайн в четверг 8 февраля 2024 года с 11.00 до 12.30 мск.

В рамках проекта «Формирование экосистемы обучения и просвещения в области оценки в социальной сфере», выполняемого при поддержке ФПГ Ассоциацией ИнА-Центр, которая входит в холдинг «Сибирский Центр», мы (ИнА-Центр и наши партнеры по проекту Компания «Процесс Консалтинг») перелопатили большой объем информации, проанализировали тенденции оценки и собрали данные для разработки образовательных программ, ибо нам важно давать ученикам актуальную информацию.

Расскажу про тренды оценки и как каждый из них учитывать.

Итак, начнем.

Гуру оценки Майкл Скривен и Майкл Пэттон еще в 2008-2009 годах говорили о том, что оценка развивается как трансдисциплина, то есть как такая отрасль знания, которая имеет самостоятельный статус и в то же время используется как методологический или аналитический инструмент в нескольких других дисциплинах. Поясняя этот тезис, Майкл Пэттон (2009) писал: «…В любой дисциплине, профессии или области деятельности люди занимаются оценкой в той или иной форме.» Что греха таить – принимая взвешенные управленческие решения в большинстве областей мы проводим оценку или исследование с элементами оценки, назвать это трендом сложно, но начать с этого статью вполне уместно :)

Поскольку в оценке используются методы социальных наук, развитие методологии оценки происходит параллельно с развитием методологии социальных исследований. Применительно к оценке программ и проектов исследователи отмечают следующие общие тенденции:

· Использование больших данных;

· Использование науки о сложных системах и системного мышления;

· Переход к трансформационной парадигме: что происходит? (мониторинг) – что произошло? (оценка) – что произойдет? (предсказание) – как мы можем изменить (повлиять на) то, что произойдет? (трансформационный подход).

Сегодня функция внутренней оценки чаще всего ассоциируется с научением. На смену словосочетанию «мониторинг и оценка» пришло устойчивое словосочетание «мониторинг, оценка и научение» (далее – МОН). В английском варианте это звучит как monitoring, evaluation, and learning. Имеется в виду, что мониторинг и оценка способствуют получению организацией нового практически полезного знания, поддерживая тем самым развитие организации как обучающейся.

«По сути, МОН представляет собой систему или цикл со всеми тремя компонентами: мониторингом, оценкой и обучением, работающими во взаимосвязи на всех этапах проекта и программы — от инициирования до завершения. МОН помогает организациям прояснять намерения, собирать важные данные для оценки эффективности интервенций и отслеживать рычаги для изменений. В идеале процессы МОН должны также включать реалистичную оценку внутренних и внешних возможностей, чтобы быстро реагировать и адаптироваться в режиме реального времени». Встраивание МОН в систему адаптивного управления – одна из важных современных тенденций (P. Rogers, Macfarlan, A., 2020).

Продолжается тенденция усиления доказательности, набирает обороты доказательная филантропия. Исследование, проведенное Центром развития филантропии Фонда Потанина (Кузьмин, 2020), показало, что одной из тенденций развития филантропии в современном мире является повышение доказательности. Доказательной можно назвать любую концепцию или стратегию, в основе которой лежит объективная информация, как правило, это результаты исследований или измерений. Часто также говорят о том, что именно надежные данные, а не личный опыт либо интуиция, станут драйвером развития филантропии в будущем.

Эксперты грантовых конкурсов стали уделять больше внимания доказательности.

Мы анализировали зарубежные тенденции в обучении оценке, не будем на них останавливаться подробно. Скажу лишь, что за рубежом программы для НКО, как правило, включают:

· Основы оценки проектов и программ;

· Теории изменений, логические модели;

· Сбор и анализ данных;

· Отчетность и коммуникации.

Анализируя нашу российскую ситуацию, мы выделили две группы заинтересованных в изучении оценки людей, то есть в первую очередь — потенциальных клиентов обучающих программ:

· Заинтересованные в коротком, довольно формальном обучении с подтверждением прохождения обучения и с оплатой за счет направляющей на обучение организации.

· Заинтересованные в длинном обучении, включая сопровождение и поддержку специалистов и общение с преподавателями, возможно, за собственные средства, с перспективой вхождения в профессиональное сообщество.

· Потенциальные преподаватели оценки, которые являются преимущественно представителями академической сферы и хотят расширить направления своей работы.

Под занавес поговорим про тренды современного российского третьего сектора, которые интересны с точки зрения оценки. Приведу сразу «избранные» выводы и соображения о том, как это можно использовать.

· Гибридность секторов и разные формы организаций плюс гибкость организации вынуждают нас акцентировать внимание на краткосрочных результатах, затрудняют преемственность данных и преемственность показателей оценки.

· Акцент на ценностях, значительное количество проектов патриотической, ценностной направленности, кросс-культурные проекты. Здесь мы сталкиваемся со сложностями оценки патриотических и кросскультурных программ, эти примеры мы будем рассматривать в наших образовательных программах.

· Внимание к имиджу, одним из основных инструментов которого являются соцсети. В контексте имиджа важна демонстрация результатов за счет оценки.

· Появляются специфические методики оценки и показатели.

Посмотреть полный текст наших исследований вместе со ссылками на первоисточники и списком литературы (в котором аж 41 публикация!) можно здесь:

· Аналитический обзор мировых тенденций в оценке и зарубежных образовательных программ по оценке, подготовленный компанией «Процесс Консалтинг»;

· Аналитический обзор по потребностям НКО в контексте оценки, подготовленный Ассоциацией ИнА-Центр.