ПРИКАСПИЙСКИЙ ЖУРНАЛ

УПРАВЛЕНИЕ И ВЫСОКИЕ ТЕХНОЛОГИИ

Комбинаторные методы обнаружения согласованности суждений экспертов при числовой шкале оценивания

Читать

Голик Ф.В. Комбинаторные методы обнаружения согласованности суждений экспертов при числовой шкале оценивания // Прикаспийский журнал:  управление и высокие технологии. — 2017. — №4. — Стр. 34-50.

Голик Ф.В. - доктор технических наук, профессор, Новгородский филиал Российской академии народного хозяйства и государственной службы при Президенте Российской Федерации, 173003, Российская Федерация, Новгородская область, г. Великий Новгород, ул. Германа, 31, felix.golik@mail.ru

Цель статьи - разработка процедур обнаружения согласованности суждений экспертов (ССЭ) в виде экспертных оценок, полученных при проведении групповых экспертиз в числовых шкалах; определение вероятностных характеристик предложенных процедур и результатов оценивания. Объект исследования - экспертные оценки, полученные в результате проведения групповой экспертизы объектов с оцениванием их на основе использования числовой шкалы. Предмет исследования - оценка ССЭ. В качестве мер согласованности оценок ССЭ при использовании числовой шкалы оценивания применяются среднее значение, медиана, коэффициент вариации величин экспертных оценок. При этом корректную проверку адекватности этих показателей выполнить не удается, поскольку неизвестен закон распределения вероятности оценок. Причина этого - существует связь между показателями ССЭ и видом закона распределения оценок. При полной ССЭ распределение вырожденное, а при его отсутствии - равномерное. В связи с этим предложено вместо количественной оценки ССЭ проверять факт ее наличия. Процедура сводится к проверке гипотезы о законе распределения экспертных оценок. Если распределение незначимо отличается от равномерного, то принимается решение об отсутствии ССЭ. В противном случае считают, что мнения экспертов согласованы. При решении поставленной задачи используется аппарат комбинаторной теории размещений, теории вероятностей и математической статистики. Оценки вероятностных характеристик процедур обнаружения ССЭ получены посредством компьютерного имитационного моделирования. Основные результаты исследования: разработаны конструктивные методы обнаружения ССЭ при использовании числовой шкалы оценивания; предложены процедуры обнаружения ССЭ относительно конкретных объектов и относительно групповой экспертизы в целом; путем компьютерного имитационного моделирования найдены оценки вероятностных характеристик процедур оценивания. Результаты работы могут найти применение при принятии управленческих решений, прогнозировании и долгосрочном планировании в различных сферах деятельности.

Ключевые слова: экспертная оценка, шкала оценивания, согласованность экспертных оценок, критерий «пустых ящиков», статистическая гипотеза, уровень значимости, доверительная вероятность, кривые Пирсона, расстояние полной вариации, компьютерное моделирование, принятие реше