ATT00025-Экспертные оценки от Анохина

Модифицированная

Количественные шкалы

порядковая шкала

(интервалов, разностей,

Шкалы

(баллы)

отношений, абсолютная)

'

'

'

Методы непосредственной

Методы

численной оценки (баллы,

Черчмена-Акофа, Терстоуна,

абсолютная, средняя точка)

фон Неймана-Моргенштерна

Методы

оценивания

' '

Вектор

Результат

оценок (X)

Коэффициент

"

Коэффициент

вариации

(V)

!

корреляции (ρ )

Коэффициент

'

интерквартильной

!

Выделение высоко-

вариации

(Q)

согласованных групп

Анализ

согласованности

'

'

'

'

Мажоритарная

Медиана

Среднее

Среднее

выборка

распределения

арифметическое

взвешенное

Методы

обобщения

Рис. 36. Процедура количественного оценивания

141

Шкала
гиперпорядка	Шкалы

'

'

Метод

Метод

парных сравнений

гипер-

предпочтительности

упорядочения

с градацией

Методы

превосходства

оценивания

'

Коэффициент

непротиворечивости

Качество

(η )

оценок

'

'

Матрица

Вектор

Вектор

парных сравнений

"

относительных

"

)

рангов (R)

(Ï)

значимостей (Λ

Результат

Коэффициент

Коэффициент

вариации

!

"

конкордации

значимостей (V)

(W)

Коэффициент

"

Коэффициент

интерквартильной

!

парной ранговой

вариации

(Q)

корреляции (ρ )

'

Анализ

Выделение высоко-

согласованности

согласованных групп

'

'

'

Методы

Среднее

Среднее

Медиана

обобщения

арифметическое

взвешенное

Кемени

Рис. 37. Процедура экспертного анализа значимости

142

Литература

1.Анохин А.Н. Опыт применения экспертных оценок в решении задач системного анализа энергетических объектов / Сб. трудов каф. АСУ №9 // Под общ. ред. В.А. Острейковского. – Обнинск: ИАТЭ, 1994, с. 72-80.

2.Анохин А.Н., Гикал С.В., Терехов А.Ф. Автоматизированная технология применения экспертных оценок в решении задач системного анализа / Сб. трудов каф. АСУ №10 // Под общ. ред. В.А. Острейковского. – Обнинск: ИАТЭ, 1995, с. 80-90.

3.Анохин А.Н., Гикал С.В. Алгоритм классификации мнений при обработке множественных экспертных суждений / Сб. трудов каф. АСУ №11 // Под общ. ред. В.А. Острейковского. – Обнинск: ИАТЭ, 1996, с. 80-86.

4.Анохин А.Н., Острейковский В.А., Косицкий Т.А., Высоцкий В.Г. Экспертная оценка технического состояния устройства логического управления энергоблоков Калининской АЭС / 10 лет Калининской атомной электростанции. Сб. статей // Приложение к журналу «Ядерная энергетика. Известия вузов». – Обнинск: ИАТЭ, 1994, с. 50-54.

5.Бешелев С.Д., Гурвич Ф.Г. Математико-статистические методы экспертных оценок. – М.: Статистика, 1980. – 263 с.

6.Горелик А.Л., Абаев Л.Ч. К вопросу расчета коэффициента согласованности экспертных оценок в задаче группового выбора и принятия решений / Кибернетика (Киев), 1990, №3, с. 65-69.

7.Добров Г.М., Ершов Ю.В., Левин Е.И., Смирнов Л.П. Экспертные оценки в научно-техническом прогнозировании. – Киев: Наукова думка, 1974. – 160 с.

8.Козин И.О. Элементы теории выбора и принятия решений. Учебное пособие по курсу «Проектирование АСУ». – Обнинск: ИАТЭ, 1991. – 74 с.

9.Литвак Б.Г. Экспертная информация: методы получения и анализа. – М.: Радио и связь, 1982. – 184 с.

10.Острейковский В.А. Конспект лекций по курсу «Основы теории систем». Основные положения и методы теории систем. – Обнинск:

143

ИАТЭ, 1987. – 116 с.

11. Пельц Д., Эндрюс Ф. Ученые в организациях: об оптимальных условиях для исследований и разработок. – М.: Прогресс, 1973. – 471 с.

12. Перегудов Ф.И., Тарасенко Ф.П. Введение в системный анализ. – М.: Высшая школа, 1989. – 367 с.

13. Саати Т., Кернс К. Аналитическое планирование. Организация систем. – М.: Радио и связь, 1991. – 224 с.

14. Статистический словарь / Гл. ред. М.А.Королев. – М.: Финансы и статистика, 1989. – 623 с.

15. Управленческое консультирование: В 2-х т. / Под. ред. М. Кубра. – М.: Интерэксперт, 1992.

144

		Предметный указатель
Анализ группировок (117)			Классификация - методы (115 -118)
- дискриминантный (116)			- вопросов (46, 70)
- кластерный (116)			- методов экспертного опроса (74, 87)
- латентных структур (117)			- методов обобщения оценок (124, 132)
- образов (117)			- показателей согласованности (94-96, 132)
- системный (9,15,22,43)			- факторов (20)
- согласованности (94-114)			- øêàë (49, 57, 70)
- факторный (115,116)			Конкордация (119, 123, 133)
- экспертный (5,10,11,13,15,38-41,45-			Корреляция (40, 41, 99)
46, 67, 71, 80, 133, 137)			- ранговая (99)
Анкета (12, 45, 67-70, 80)			Коэффициент
Анонимность	(74, 76)		- активности (82)
Вариационный размах (95, 96, 106, 107)			- ассоциации (96, 111, 113)
- ðÿä (104, 107)			- вариации (96, 97, 106, 107, 134, 136, 137)
Вектор идентификаторов (89, 93, 131)			- - рангов (96, 104, 113, 136)
- относительных значимостей (89, 90, 92, 131,			- - Беккера (96, 104, 105, 136)
136)			- - классов (96, 113, 136)
- оценок (89, 93, 131, 136)			- - интерквартильной (96, 107, 108, 136)
- рангов (89, 126, 127, 131, 136)			- весовой эксперта (128, 129)
- собственный (92)			- значимости (26)
Вес относительный (25, 39, 40, 41, 90)			- компетентности (82, 129, 134)
Вопрос - классификация (46,70) - принципы			- конкордации (41, 96, 97, 101-103, 109, 120,
формулирования (46-48)			134)
- закрытый (46)			- корреляции (96, 114, 116)
- дихотомический (46)			- крутизны убывания (118)
- косвенный (46)			- непротиворечивости (85)
- открытый (свободный) (46)			- осведомленности (82, 129)
- прямой (46)			- превосходства (135, 136)
Гистограмма	(42, 134, 135)		- принадлежности (116)
Ãðàô (многоугольник) предпочтений			- ранговой корреляции (40, 41, 97, 99,100,102)
(59, 60, 85)			- - - Кендэлла (96, 97)
Группа высокосогласованная (88, 115, 118-			- - - Спирмена (96, 98)
122, 125, 132, 133, 137)			- - - парной (42, 98, 117-121)
- доминирующая (122, 123)			- связи (26)
- компактная (117)			- согласия (96, 109, 110)
- численность (78, 87, 122)			Критерий (6, 21, 26, 29, 30, 31, 34, 43, 45, 99)
Значимость - относительная (23-26, 28, 29,			- Пирсона (103)
32, 34, 60, 90-91, 106-108, 110, 128-130, 135)			Линейная свертка (33, 43, 46, 137)
- статистическая (99, 101, 103, 122)			Матрица
- суммарная (24)			- относительных значимостей (32, 106, 108)
Измерений теория		(47)	- - предпочтений (109, 126)
Интеллектуальная		собственность (80)	- отношения (31, 98, 127)
Квартиль (76, 107, 129)			- парных сравнений (59, 60, 85, 89, 92-93,109,
Класс (49, 50, 58, 61, 93, 112)			131)

145

- - - предпочтительности (92)			- мозговой атаки (74, 75, 87)
- - - эквивалентности (93)			- ñóäà (74, 75, 87)
- разногласий (111-113)			Медиана (76, 136)
- рангов (95, 97, 104)			- Кемени (124, 125, 127, 130, 132, 136)
- решающая (25)			- распределения (124, 129, 132)
- сильных связей (119-121)			Множество нечеткое (6, 50, 61)
Метод ранговой корреляции (8)			Модель (5, 21, 31, 39, 40) - качество (34, 37-
- таксономии (116)			44) - построение (11, 16-44) - свойства (34-
- экспертных оценок (7, 13)			37, 42, 43) - структура (18, 21)
Методы	анализа	компетентности	-математическая(5)
- взаимооценки (81, 87)			- формальная (16, 17, 43)
- документационный (83, 87)			- эвристическая (10, 15, 16, 19, 21, 43, 71, 137)
- самооценки (81, 87)			Нормирование (25, 32, 39, 55)
- тестовый (83, 87)			Объект исследования (управления, предмет-
Методы обобщения - алгебраические (124,			ной области) (5, 10, 11, 15-18, 29, 30, 45, 46)
132) - статистические (124, 132)			- экспертизы (11, 45, 46, 76, 95, 110, 134)
- классификаций (130)			Ограничение (18, 21)
- относительных значимостей (128-130)			Оплата труда (78, 79, 87)
- парных сравнений (130)			Относительная значимость (см. Значимость
- ранжирований (125-128)			относительная)
- численных оценок (128-130)			- предпочтительность (51, 60)
Методы	(способы)	оценивания -	- частота (39, 95, 96)
качественного (58-61) - количественного (61-			Переменная (17, 21)
65)			Показатель информационный (96, 111, 112)
- векторов предпочтения (60, 66)			- связных рангов (98, 99, 102, 103)
- гиперупорядочения (61, 66)			Пороговое значение (119-123)
- классификации (58, 65, 66)			Преобразование (47)
- множественных сравнений (60, 61, 65, 66)			- взаимно-однозначное (49, 57)
- непосредственной численной оценки (61,66)			- гипермонотонное (52, 57)
- парных сравнений (58, 61, 65, 66)			- лингвистическое (50, 57)
- ранжирования (59, 65, 66)			- линейное (53, 57)
- Терстоуна (63,66)			- монотонное (50, 57)
- фон Неймана-Моргенштерна (64, 66)			- нелинейное (54, 57)
- Черчмена-Акофа (62,66)			- подобия (растяжения) (54, 57)
Методы	эвристического моделирова-		- сдвига (53, 57)
íèÿ - графовые (22, 23, 26, 43) - матричные			- тождественное (54, 57)
(22, 23, 43)			Принцип Кондорсе (124, 125, 132)
- анализа иерархий (23, 29, 43)			Ðàíã (52, 59, 89-91, 104, 108, 125-128, 136)
- морфологический (23, 43)			- связный (89, 91, 98, 99, 102, 103, 125)
- морфологического ящика (23)			Ранжирование (51, 89, 95, 99,102,110,127)
- отрицания и конструирования (23)			- простое (строгое) (59, 89, 97,100,101)
- прогнозного графа (23, 27, 43)			- слабое (нестрогое) (59, 89, 98,100,102)
- решающих матриц (23, 25, 43)			- частичное (59, 89)
- систематического покрытия поля (23)			Расстояние (близость) (28, 91, 104, 105, 127,
- PATTERN (8, 23, 26, 43)			128, 130)
- QUEST (8, 23, 24, 43)			- евклидово (117)
- SEER (23, 26, 43)			Результаты - интерпретация (11,133-137) -
Методы	экспертного опроса		прагматичность (137) - представление (133) -
- Дельфы (7, 26, 74, 75, 83, 87)			преобразование (93) - унификация (88-94,
- комиссии (74, 87)			131)

146

Сильная связь (115)	- относительной важности (предпочтительно-
Символ Кронеккера (49, 55)	ñòè) (52)
Система сложная (5)	- отношений (54, 57)
- ЭКСПЕРТ (13)	- периодическая (циклическая) (53, 57)
Согласованность относительных значимос-	- порядка простого (51)
òåé (106, 109)	- - слабого (51)
- парных сравнений (109-111)	- - частичного (51)
- классификаций (111-114)	- порядковая (ранговая) (50, 57)
- абсолютных оценок (114)	- порядковая модифицированная (51)
- ранжирований (95-106)	- - - твердости минералов (51)
Среднее геометрическое (92)	- - - силы ветра (51)
- отклонение (95, 96)	- - - магнитуд землетрясений (51)
- арифметическое (124, 128, 132, 136)	- разностей (53, 57)
- взвешенное (124, 128, 132, 136)	- степенная (54)
Степень аргументированности (82)	- экспоненциальная (54)
- влияния (81)	Эксперт (7, 9, 12) - подбор (71-73, 87)
- знакомства (81)	- весовой коэффициент (129)
- надежности (83)	- возраст (84)
- - относительной (83)	- компетентность (81, 87)
Сумма рангов (97, 101, 103, 124, 125, 132,	- мотивация (84)
136)	- рейтинг (137)
Таблица вариационных рядов (104)	Экспертиза (11, 15, 76, 88, 89, 123) - объект
- распределения классов (114)	(46) - предмет (46)
- распределения рангов (105, 114)	Экспертная оценка (3, 5, 8-11, 15, 26, 38,
Транзитивность (59, 85, 87, 89, 92, 126)	80) - контрастность (137) - обобщение (124-
Упорядочение (см. Ранжирование)	131) - обработка (11, 88-132) - противоречи-
Фактор (5, 10, 11, 15, 19-21, 29-43, 134)	вость (84-87) - согласованность (см. Согласо-
- избыточный (38, 43, 85, 87)	ванность)
- корневой (21, 31-34, 36, 43, 46)	Экспертный анализ (см. Анализ эксперт-
- ëèñò (31, 33, 43, 45, 46)	íûé)
- ортогональный (40, 41, 46)	Экспертный опрос - постановка (11,45-70)
Факторов иерархия (29-33, 43, 45)	- проведение (11,71-87)
- - строгая (31)	- групповой (74, 87)
- - нестрогая (31)	- заочный (74, 87)
- семейство (31-33, 43, 46)	- индивидуальный (74, 87)
Функция принадлежности (50)	- очный (личный) (74, 87)
Öåëü (6, 23-29, 46)	Явление (10, 21, 34, 46, 56)
Шкала (45, 47-57, 65, 70, 91) - классифика-
ция (49, 57, 70) - разработка (55-57) -
свойства (55)
- абсолютная (54, 55, 57)
- балльная (51)
- гиперпорядка (52, 55-57)
- интервалов (53, 55, 57)
- качественная (49-52, 55, 57, 116)
- количественная (53-57, 116, 117)
- логарифмическая (54)
- нелинейная (54)
- нечеткая (лингвистическая) (50, 56, 57)
- номинальная (49, 56, 57)

147

Оглавление
Предисловие..............................................................................	3
Глава 1. Введение в экспертный анализ....................................	5
1.1. Предпосылки экспертных оценок ......................................	5
1.2. История экспертных оценок...............................................	7
1.3. Основные понятия и определения .......................................	9
Выводы .....................................................................................	15
Глава 2. Формирование модели................................................	16
2.1. Формальное и эвристическое моделирование ...................	16
2.2. Методы эвристического моделирования...........................	22
2.3. Иерархия факторов ............................................................	31
2.4. Свойства модели ................................................................	34
2.5. Управление качеством модели ..........................................	38
Выводы .....................................................................................	43
Глава 3. Постановка экспертного опроса ................................	45
3.1. Объекты экспертизы и формулирование вопроса .............	45
3.2. Шкалы ................................................................................	47
3.3. Способы оценивания ..........................................................	58
3.4. Анкета ................................................................................	67
Выводы .....................................................................................	70
Глава 4. Проведение экспертного опроса.................................	71
4.1. Подбор экспертов ...............................................................	71
4.2. Методы проведения опроса................................................	74
4.3. Качество оценок.................................................................	80
Выводы .....................................................................................	87
Глава 5. Обработка экспертных оценок ...................................	88
5.1. Унификация результатов ...................................................	88
5.2. Анализ согласованности ....................................................	94
5.3. Выделение высокосогласованных подгрупп.....................	115
5.4. Синтез обобщенного мнения ..............................................	124
Выводы .....................................................................................	132
Глава 6. Интерпретация результатов .......................................	133
Выводы .....................................................................................	137
Заключение ...............................................................................	138
Литература ...............................................................................	143
Предметный указатель.............................................................	145

148