Количественные и качественные экспертные оценки

1. Экспертная классификация

Этот метод целесообразно использовать, когда необходимо определить принадлежность оцениваемых альтернативных вариантов к установленным и принятым к использованию классам, категориям, уровням, сортам и т. д. (далее — классы).

Он может быть использован и тогда, когда конкретные классы, к которым должны быть отнесены оцениваемые объекты, заранее не определены. Может быть заранее не определено и число классов, на которое производится разбиение оцениваемых объектов. Оно может быть установлено лишь после завершения процедуры классификации.

Если эксперту необходимо отнести каждый из альтернативных вариантов к одному из заранее установленных классов, то наиболее распространена процедура последовательного предъявления эксперту альтернативных вариантов.

В соответствии с имеющейся у него информацией об оцениваемом объекте и используемой им оценочной системе эксперт определяет, к какому из классов оцениваемый объект принадлежит.

После завершения процедуры последовательного предъявления оцениваемых альтернативных вариантов эксперту может быть предъявлен результат его оценки в виде распределения всех оцененных им альтернативных вариантов по классам.

На этом этапе эксперту, как правило, предоставляется возможность, исходя из общего результата классификации, внести коррективы в данные им оценки.

Если проводится коллективная экспертиза, то результаты экспертной классификации, указанные каждым из экспертов, обрабатываются с целью получения результирующей коллективной экспертной оценки.

В зависимости от целей экспертизы может возникнуть необходимость отнесения альтернативных вариантов к упорядоченным классам.

Скажем, необходимо отнести оцениваемые объекты к соответствующим категориям, причем так, чтобы более предпочтительные объекты были отнесены к более предпочтительным категориям.

Естественно, это отражается на процедуре экспертной классификации. Но главное, чтобы эксперт однозначно понимал поставленную перед ним задачу.

Если число классов, на которое должны быть разбиты альтернативные варианты, заранее не оговаривается, то целесообразно использование следующей процедуры.

Эксперту предъявляется пара альтернативных вариантов и предлагается определить, относятся ли они к одному классу или к разным.

После этого эксперту последовательно предлагаются оцениваемые альтернативные варианты и выясняется, может ли каждый из них быть отнесен к одному из образовавшихся к тому времени классов или необходимо для данного альтернативного варианта образовать новый класс.

Процедура завершается после того, как эксперту будут предъявлены все альтернативные варианты.

2. Метод парных сравнений

Метод парных сравнений является одним из наиболее распространенных методов оценки сравнительной предпочтительности альтернативных вариантов.

При методе парных сравнений эксперту последовательно предлагаются пары альтернативных вариантов, из которых он должен указать более предпочтительный.

Если эксперт относительно какой-либо пары объектов затрудняется это сделать, он вправе посчитать сравниваемые альтернативные варианты равноценными либо несравнимыми.

После последовательного предъявления эксперту всех пар альтернативных вариантов определяется их сравнительная предпочтительность по оценкам данного эксперта.

В результате парных сравнений, если эксперт оказался последовательным в своих предпочтениях, все оцениваемые альтернативные варианты могут оказаться проранжированными по тому или иному критерию, показателю, свойству.
Если эксперт признал некоторые альтернативные варианты несопоставимыми, то в результате будет получено лишь их частичное упорядочение.

В практике использования метода парных сравнений нередко приходится сталкиваться с непоследовательностью и даже противоречивостью оценок эксперта.

В этих случаях необходимо проведение специального анализа результатов экспертизы.

Отметим также, что при достаточно большом числе оцениваемых альтернативных вариантов процедура парного сравнения всех возможных их пар становится трудоемкой для эксперта. В этом случае целесообразно применение соответствующих модификаций метода парных сравнений.

Например, если предположить непротиворечивость оценок эксперта, то практически достаточно однократного предъявления каждого альтернативного варианта в паре с каким-либо другим.