Метод непосредственной оценки

Этот метод использует ранжирование экспертами объектов (явлений, факторов) по степени их значимости, т.е. в этом случае данную проблему сложно оценить в количественном выражении и ее оценивают по ранжированию качеств. При этом методе эксперт использует свою собственную шкалу измерений в рамках предлагаемого диапазона по числу объектов. Этот метод невозможно использовать при большом количестве оцениваемых объектов. При числе объектов, близком 10, приоритетность может быть выстроена, а при большем числе объектов становится трудно их дифференцировать. Но данный метод не требует обучения экспертов.

 

Метод парных сравнений.

Данный метод удобен в использовании при большом числе объектов, он довольно прост и легко программируется. В этом методе производится попарное сравнение объектов с тем, чтобы установить в каждой паре наиболее важный объект.

 

Составляется матрица порядкаn – число объектов, элементами которой являютсяХij

 

Хij=1, если объект iпредпочтительнее j;

Хij=0, если обектjпредпочтительнее i;

 

Например:

Эксперту предлагается ранжировать объекты A, B, C, D.

Эксперт составляет матрицу:

 

 

Матрица эксперта ( по методу парных сравнений)

 

Табл.1.4.

  A B C D Cуммарный ранг
A ´
B ´  
C ´
D ´

 

При заполнении этой матрицы эксперт руководствовался следующими своими собственными соображениями: объект А предпочтительнее объекта C и предпочтительнее объекта D. Аналогично эксперт попарно сравнивает каждый объект с каждым.

Обобщенный ранг показывает, что для эксперта объекты А и В неразличимы и предпочтительнее, чем объекты С и D, которые в свою очередь также получили одинаковые ранги. Для обеспечения корректности дальнейших расчетов необходимо полученные ранги превратить в стандартизированные.

 

Согласованность оценок экспертов.

 

Каждый эксперт дает свои собственные оценки, но окончательный результат всей группы экспертов необходимо поэтому проверить на согласованность.

 

Коэффициент конкордации.

Согласованность группы экспертов рассчитывается с помощью коэффициента конкордации.

Рассмотрим пример ранжирования мероприятий (j = 1, ..., m), проводимого командами экспертов (i = 1,...,m). Схема представления исходных данных дана в таблице 1.5.

 

Этап 1.

Каждая команда должна сформировать таблицу мнений. В строке мнения члена команды не должно быть одинаковых рангов.

Таблица мнений

(табл.1.5.)

Члены команды(эксперты) i=1…,m Мероприятия J=1,….,n S=
А В …….. Р
1. Иванова И.И.        
2.        
………….          
m.        
m S хjj i          
Обобщенное мнение команды          

 

Этап 2.

Каждая команда экспертов определяет степень согласованности мнений членов команды. Для этого рассчитывается коэффициент конкордации ( согласованности) W.

Расчет W ( по таблице мнений):

1. В итоговом столбце должны быть одинаковые суммы рангов, равные n(n+1)/2.

В данном примере сумма рангов равна: 15´16/2 = 120

2. Рассчитываются значения в итоговой строке – фактический ранг J-го мероприятия по всем экспертам.

 

 

m

Sхji

i=1

3. Рассчитывается среднестатистический ранг j-го мероприятия по всем экспертам:

 

m´(n+1) ´n

Acute;n

4.Определяется сумма отклонений п.2 и п.3.:

 

= Rфакт

 

5.Рассчитывается максимально возможная сумма отклонений:

6.Рассчитывается W – коэффициент конкордации:

7.Определяется значимость и согласованность мнений членов команды. Для этого приводится W к c2факт и сравнивается с табличным значением c2табл со степенью свободы (n-1)

 

c2факт=m(n-1)W

 

8.Пусть Р0= 0,05; находим по таблице значение c2табл.

Если c2факт >c2табл., то W существенен и с заданной надежностью Р0 мнение членов команды согласовано. В этом случае итоговая строка « Обобщенное мнение команды» из таблицы мнений может быть принята для обсуждения.

Если c2факт <c2табл , мнение членов команды не согласовано, и не может быть принято.

 

Значение c2 в зависимости от числа степеней свободы k и доверительной вероятности Рн [4] находят в таблице 1.6.

Таблица вероятностей Р [ c2]

 

 

K Рн   K Рн
0,05 0,01 0,001 0,05 0,01 0,001
3,84 6,63 10,83 26,30 32,00 39,25
5,99 9,21 13,81 27,59 33,41 40,79
7,81 11,34 16,27 28,87 34,80 42,31
9,49 13,28 18,46 30,14 36,19 43,82
11,07 15,09 20,52 31,41 37,57 45,31
12,59 16,81 22,46 32,67 38,93 46,80
14,07 18,47 24,32 33,92 40,29 48,27
15,51 20,09 26,12 35,17 41,63 49,73
16,92 21,67 27,88 36,41 42,98 51,18
18,31 23,21 29,59 37,65 44,31 52,62
19,67 24,72 31,26 38,88 45,64 54,05
21,03 26,22 32,91 40,11 46,96 55,48
22,37 27,69 34,53 41,34 48,28 56,89
23,68 29,14 36,12 42,56 49,59 58,30
25,00 30,58 37,70 43,77 50,89 59,70

 

 

Этап 3. Сравниваются и обсуждаются результаты проведенного анализа. Делаются выводы: та команда, у которой W больше (при согласованности мнений) считается более перспективной, и ее обобщенное мнение является основой для прогноза.

 

Выводы:

 

Экспертиза независима.

 

Результат экспертизы – основа для расчетов по проекту, реализации цели.

 

Результат экспертизы должен быть подтвержден согласованностью мнений экспертов.

 

Результат экспертизы – есть обоснованное обобщенное мнение нескольких экспертов.