Индикаторная оценка.

Огонь

При проведении индикаторной оценки суждение о программе выносится на основании замера значений некоторого числа индикаторов (показателей). Если индикаторы разработаны правильно, то с их помощью можно эффективно оценивать и ход, и результаты деятельности — так же точно, как, имея хорошо составленную карту, можно легко ориентироваться на местности. Конечно, карта является упрощенным изображением местности, и не любая карта подойдет для решения конкретной задачи.

В основе использования индикаторной оценки также лежит идея упрощения: от жизни программы во всем ее многообразии мы переходим к модели программы, которая отражает лишь наиболее значимые компоненты действительности и связи между ними. Индикаторы «привязываются» к компонентам этой модели.

Основные этапы проведения индикаторной оценки:
• Постановка задачи
• Формирование модели программы
• Разработка индикаторов и системы измерения их значений
• Замер значений индикаторов
• Предоставление сведений о значениях индикаторов лицам, принимающим решения

Индикаторная оценка – как и любая другая – начинается с постановки задачи. Если мы хотим, чтобы результаты оценки оказались полезными, начинать всегда следует с выявления будущих пользователей этих результатов и их информационных потребностей. Информационные потребности менеджеров разного уровня существенно отличаются. Вопросы заместителя главы администрации носят более глобальный (стратегический) характер, а вопросы руководителя программы связаны с повседневным (оперативным) управлением деятельностью.

Разницу в информационных потребностях пользователей результатов оценки необходимо учитывать при формировании модели программы.
Степень детализации модели определяется характером информационных запросов – как и в случае с картой. Для того, чтобы понять, в какой стороне река, нужна одна карта, а для того, чтобы провести на той же местности соревнования по спортивному ориентированию, карта нужна другая, намного более подробная.

Модель программы должна адекватно отражать её замысел и показывать связь действий в рамках программы с её результатами.Модель должна иметь такую степень детализации, чтобы в ней присутствовали все компоненты и связи, интересующие будущих пользователей результатов оценки. Разработка модели программы требует глубоких знаний в соответствующей предметной области. Чаще всего такими знаниями обладают разработчики программы. Иногда они привлекают к этой работе внешних экспертов.

Разработка индикаторов и системы измерения их значений начинается после того, как сформирована модель программы. Индикатором называют доступную наблюдению и измерению характеристику программы, позволяющую судить о других характеристиках программы, недоступных непосредственному наблюдению и измерению. Слово «индикатор» является калькой с английского «indicator». Для каждого интересующего нас элемента модели программы необходимо разработать индикаторы (один или более), замеряя значения которых, можно будет судить о тех характеристиках программы, измерить которые непосредственно нельзя.

В разработке индикаторов обязательно должны участвовать эксперты в данной предметной области. Только глубокое и всестороннее знание
предмета в сочетании с хорошим знанием техники измерений и общей ситуации вокруг программы может обеспечить выбор правильных индикаторов.

Хороший индикатор должен быть:
✓ ясным — однозначным и хорошо определенным;
✓ существенным — относиться к значимым характеристикам программы;
✓ экономичным – предполагать разумные затраты на его измерение;
✓ адекватным – отражать именно ту характеристику программы, которая нас интересует;
✓ проверяемым – допускать независимую проверку.

Существует несколько классификаций индикаторов по разным основаниям.В зависимости от того, какие характеристики программы измеряются,индикаторы делятся на количественные и качественные. При этом значение индикатора – это всегда число, которое служит признаком чего-либо, на что-либо указывает, о чем-либо предупреждает. В зависимости от того, что они измеряют, также различают индикаторы ресурсов, процесса, непосредственного результата, общего результата, влияния.

Огромным преимуществом системы индикаторной оценки является то, что пользоваться ей могут люди, не являющиеся экспертами. Экспертиза необходима на стадиях формирования модели программы, разработки индикаторов и построения системы измерения их значений. Дальнейшая эксплуатация системы (замер значений индикаторов и их интерпретация) может осуществляться в соответствии с инструкциями.
Здесь будет уместна аналогия с системой измерения наиболее важных характеристик автомобиля в процессе его эксплуатации. Водителю не
обязательно быть экспертом в сфере автомобилестроения для того, чтобы грамотно использовать автомобиль и правильно интерпретировать
значения показателей, выведенных на приборную панель.

В одном из следующих постов еще раз вернемся к индикаторам.

Автор: Алексей Кузьмин
Страница проекта: Поддержка развития оценки и развитие оценочного мышления. Пятый элемент