2.3. Алгоритм, задачи и классификация экспертных методов

Среди существующих многочисленных методов получения коллективной экспертной оценки, Э. П. Райхман и Г. Г. Азгальдов рекомендуют следующий алгоритм экспертных операций.

1. Проводится подготовительный этап:

• формирование рабочей и экспертной групп;

• классификация задач (продукции и потребителей);

• формирование структурной схемы показателей.

2. Этап получения индивидуальных экспертных оценок:

• принятие процедуры назначения оценок экспертами;

• выбор метода получения информации от экспертов и создание документов опроса (анкет, форм пояснительных записок и т.д.);

• проведение опроса экспертов.

3. Этап обработки результатов и получения коллективных экспертных оценок:

• обобщение индивидуальных экспертных оценок;

• формирование принципов согласованности индивидуальных экспертных оценок;

• определение оценок объективности коллективных экспертных оценок.

В соответствии с этим алгоритмом можно сформировать следующие, далеко не равноценные задачи по важности и трудности, которые требуется решать в процессе проведения экспертных исследований.

1. Задачи подготовительного этапа

1.1. Разработка принципов формирования рабочей группы. Здесь должны быть решены следующие вопросы:

• определение функций и структуры рабочей группы;

• распределение обязанностей между членами рабочей группы;

• определение количества членов рабочей группы.

2. Разработка принципов формирования экспертной группы:

• количественное определение качества экспертов;

• определение требуемого количества экспертов;

• формирование системы экспертной группы.

2. Разработка принципов построения структурной схемы показателей:

• формирование методологии построения структурной схемы;

• определение требуемого количества показателей и числа уровней иерархии.

2. Задачи этапа получения индивидуальных экспертных оценок

1. Разработка процедуры обсуждения оценок экспертами:

• открытого обсуждения;

• письменных обоснований.

2. Разработка методов получения информации от экспертов:

• формирование оценочных шкал;

• формирование методологи интервьюирования экспертов;

• формирование методологи анкетирования экспертов.

3. Разработка методов планирования опроса экспертов.

• определение количества туров опроса;

• определение последовательности предъявления объектов оценки;

• разработка оптимальной, с точки зрения трудоемкости опроса и обработки, матрицы «объекты-эксперты».

3. Задачи этапа получения коллективных экспертных оценок

1. Разработка методов обобщения индивидуальных экспертных оценок:

• исследование метода усреднения экспертных оценок;

• исследование методов исключения выпадающих значений;

• исследование процедуры голосования;

• исследование законов распределения для принятия решения о последующих процедурах.

2. Разработка методов определения согласованности индивидуальных экспертных оценок:

• определение принципов интерпретации числовых значений согласованности мнений;

• определение согласованности по одной оценке;

• определение согласованности по совокупности оценок;

3. Разработка методов определения объективности коллективных экспертных оценок:

• определение надежности полученных результатов;

• определение погрешности полученных результатов.