Оценочные системы

Значительная роль при проведении процедур многокритериального экспертного оценивания принадлежит оценочным системам.

Приведем их описание.

Структура оценочной системы

Оценочная система, используемая при многокритериальном экспертном оценивании, включает такие важные составляющие, как:

перечень критериев, характеризующих объект принятия управленческого решения;

оценка сравнительной важности критериев; шкала для оценки проектов по критериям;

формирование принципа выбора.

Формирование составляющих оценочной системы в различной степени трудоемко. Однако отсутствие какой-либо из перечисленных выше составляющих либо недостаточное качество какой-либо из них делают невозможным получение адекватной оценки проекта и как следствие затрудняют процесс выработки и принятия эффективных решений.

Остановимся подробнее на каждой из составляющих оценочной системы.

Формирование перечня критериев

Перечень критериев, характеризующих сравнительную предпочтительность объектов принятия управленческого решения, должен удовлетворять ряду естественных требований.

Как уже говорилось выше, само понятие "критерий" тесно связано с таким понятием, как "цель". ЛПР привычно рассуждает в терминах стоящих перед ним целей. Например, целью может быть повышение доходности предприятия.

Однако степень достижения цели может быть измерена лишь с помощью специальных критериев. В качестве таких критериев могут быть использованы экономические критерии: поток платежей, прибыль, срок окупаемости, внутренняя норма окупаемости и т. д.

Нередко наряду с критериями чисто экономического характера приходится учитывать и критерии другой природы:

критерии, характеризующие технические возможности продукции, выпуск которой становится осуществимым благодаря реализации проекта;

критерии, характеризующие экологическую безопасность производства;

критерии, характеризующие степень риска при реализации проекта, и т. д.

Основная цель использования многокритериальной оценки состоит в переходе от таких понятий, как "полезность объекта принятия управленческого решения", "ценность", "важность", которые, как правило, достаточно сложны при практической работе с ними, к более понятным критериям, характеризующим указанные понятия и гораздо более пригодным для оценки экспертами.

Сформулированная ЛПР цель может оказаться неоцениваемой количественно.

Как правило, цель, стоящая перед организацией, или то более общее понятие, которое мы используем для оценки объекта принятия решения, заменяется совокупностью критериев.

К этой совокупности критериев предъявляется ряд требований. Как уже говорилось выше, лишь совокупность критериев, удовлетворяющая необходимым требованиям, может входить в состав оценочной системы.

К числу таких требований относится полнота совокупности критериев, иными словами, совокупность критериев должна всесторонне характеризовать цель. В частности, при выборе проекта должны оцениваться такие критерии, как возможность успешной реализации проекта, полезность проекта и т. д., т. е. должен адекватно характеризоваться объект экспертизы.

Так, например, критерий "срок окупаемости" недостаточно полно характеризует экономическую целесообразность проекта.

Если мы его дополним критерием "прибыль за рассматриваемый период", картина будет более полной.

А как мы помним, совокупность критериев полна, если по оценкам их значений ЛПР может адекватно судить о степени достижения цели.

При этом формируемая оценочная система должна быть удобной для практического использования и, следовательно, не слишком громоздкой. Поэтому совокупность критериев должна определять основные характеристики объекта экспертизы.

Критерии, используемые при формировании оценочной системы, должны быть измеримыми, т е. должна иметься возможность оценки любого рассматриваемого объекта экспертизы по каждому из критериев.