3.3. Непосредственное оценивание. Приписывание баллов параметрам

В этом случае обычно используется шкала 0–10 баллов (0–20 баллов или другие подобные шкалы). Начало шкалы – 0 баллов – отсутствие значения параметра. Верхняя же граница шкалы – 10 (7, 20 и т. д.) баллов соответствует наивысшей возможной значимости параметра. Используя подобную шкалу, эксперт должен приписать каждому параметру какое-то числовое значение M_ij в пределах используемой им балльной шкалы. Затем технический работник вычисляет среднее по всем экспертам значение.

В некоторых случаях, когда число одновременно рассматриваемых экспертом параметров сравнительно невелико (например, п ≤5), эксперту может быть поставлена иная задача: в шкале 0–1,00 (или, что то же самое, в шкале 0–100%) так оценить относительную весомость M_i каждого параметра, чтобы их сумма была равна 1. Строго говоря, может быть поставлено условие, чтобы сумма весомостей была равна не 1, а какому-то другому, предварительно зафиксированному числу (например, 10 баллам, 20 баллам и т. д.), такой метод называется «методом фиксированной суммы». Вспомогательная шкала [7, 10], предназначенная для назначения оценок весомости, представляет собой совокупность качественных (словесных) описаний, которые в обобщенной форме характеризуют значимость показателя с точки зрения его влияния на качество оцениваемого объекта или же значимость фактора (объекта) относительно сопоставляемых с ним. Обычно вспомогательную шкалу строят симметричной (пример в табл. 4).

Таблица 4

Пример симметричной вспомогательной таблицы

Характеристика значимости	Баллы
Крайне важный показатель	+4
Важный показатель	+2
Показатель средней важности	0
Маловажный показатель	-2
Крайне маловажный показатель	-4

В психофизиологии показано, что симметричные шкалы удовлетворительно обеспечивают равенство «расстояний» между объектами с одинаковой разницей баллов. Межэкспертную согласованность оценок считают достаточной, если максимальное расхождение оценок одного показателя разными экспертами не превышает 20 % диапазона шкалы.

Симметричную вспомогательную шкалу удобно использовать при назначении оценок. Но при обработке, как правило, переходят к несимметричной положительной шкале, прибавляя ко всем назначенным оценкам наивысший балл (4 балла в нашем примере).

При расчете окончательных оценок они могут быть нормированы к 1, 10 или 100 путем деления обобщенной оценки каждого показателя на их сумму и умножения на соответствующее из указанных чисел. Если обобщенная нормированная оценка какого-либо показателя оказывается меньше 0,1 от максимальной, то этот показатель исключают, а оценки остальных – пересчитывают.

Пример. Эксперты оценивали частные показатели качества микроклимата на рабочем месте станочника с помощью вспомогательной шкалы, приведенной в табл. 5. Проверить межэкспертную согласованность оценок. Рассчитать обобщенные положительные оценки весомости, приняв их сумму для всех показателей в 10 баллов.

Таблица 5

Данные опроса экспертов

Показатели		Эксперты
		1	2	3	4	5
1	Температура воздуха	1	1	2	2	1
2	Освещённость	5	6	6	6	6
3	Подвижность воздуха	3	3	3	3	3
4	Уровень вибрации	0	1	0	0	1
5	Уровень шума	8	8	8	8	8

Решение.

1. Для перехода к несимметричной положительной шкале прибавляем ко всем назначенным оценкам наивысший балл (4 балла в нашем примере). Данные заносим в табл. 5.

2. Межэкспертную согласованность оценок считают достаточной, если максимальное расхождение оценок одного показателя разными экспертами не превышает 20 % диапазона шкалы. Диапазон шкалы 8–0 равен 8 баллам. Расхождение, следовательно, не должно превышать

3. По показателю «Температура воздуха» минимальная оценка у экспертов 1, 2 и 5 – 1 балл, максимальная у 3 и 4 экспертов – 2 балла.

Расхождение m_max-m_min=2-1=1 , 1<1,6 согласованность оценок экспертов по показателю «Температура воздуха» достаточная.

Аналогично рассчитываем согласованность оценок по остальным показателям и заполняем табл. 5. Межэкспертная согласованность оценок по всем показателям достаточная.

4. Нахождение среднего мнения экспертов.

Находим сумму оценок построчно и среднее мнение всех экспертов:

Рассчитываем средние баллы по остальным показателям и заполняем табл. 6.

Таблица 6

Результаты нахождения коэффициентов весомости

Показатели		Эксперты					Расх. <1,6	∑	Обобщ.	Обобщ. нормир.	Макс.
		1	2	3	4	5
1	Температура воздуха	1	1	2	2	1	1	7	1,4	0,7527	4,3011
2	Освещённость	5	6	6	6	6	1	29	5,8	3,1183
3	Подвижность воздуха	3	3	3	3	3	0	15	3	1,6129
4	Уровень вибрации	0	1	0	0	1	1	2	0,4	0,2151
5	Уровень шума	8	8	8	8	8	0	40	8	4,3011

Определяем сумму средних оценок экспертов по столбцу:

5. При расчете окончательных оценок они могут быть нормированы к 1, 10 или 100 путем деления обобщенной оценки каждого показателя на их сумму и умножения на соответствующее из указанных чисел:

(11)

Рассчитываем параметры весомости и вносим их значения в табл. 6.

и т.д.

6. Проверка нормированных оценок весомости на значимость.

Максимальная оценка в данном примере оказалась у показателя «Уровень шума» – 4,3, значит все оценки, меньшие 0,43, необходимо исключить. Оценка показателя «Уровень вибрации» оказалась 0,215<0,43, данный показатель исключаем и производим перерасчет (табл. 7).

Таблица 7

Результаты пересчета параметров весомости

Показатели		Эксперты					∑	Обобщ.	Обобщ. нормир.	Макс.	0.1*Макс.
		1	2	3	4	5
1	Температура воздуха	1	1	2	2	1	7	1,4	0,7692	4,3956	0,43956
2	Освещённость	5	6	6	6	6	29	5,8	3,1868
3	Подвижность воздуха	3	3	3	3	3	15	3	1,6484
5	Уровень шума	8	8	8	8	8	40	8	4,3956

7. Пересчёт

Определяем сумму средних оценок экспертов по столбцу. Рассчитываем параметры весомости и вносим их значения в табл. 7.

и т.д.

Максимальная оценка в данном примере оказалась у показателя «Уровень шума» – 4,396, оценок меньше 0,4396 нет. Полученные значения весомостей значимы.

Задание. Проверить межэкспертную согласованность оценок по соответствующей вашему варианту таблице с данными опроса экспертов. Эксперты оценивали частные показатели качества микроклимата на рабочем месте станочника с помощью вспомогательной шкалы, приведенной в табл. 4. Рассчитать обобщенные положительные оценки весомости, приняв их сумму для всех показателей в 10 баллов.

План отчета

1. Задание.

2. Коэффициенты весомости. Особенности методов вспомогательных шкал. Их достоинства и недостатки.

3. Общая последовательность действий при заполнении и обработке данных при получении весомостей с помощью метода симметричной вспо­могательной шкалы.

4. Выполнение расчетов по нахождению весомостей. Выводы.