Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень

The issue of the assessment of an expert estimates consistency level for group decision making is considered. An analysis of bibliographic sources testifies that despite the availability of multiple practical tools and solutions for assessing the consistency index, all such methods have considerable...

Повний опис

Збережено в:
Бібліографічні деталі
Дата:2018
Автори: Tsyganok, Vitaliy V., Roik, Pavlo D.
Формат: Стаття
Мова:Ukrainian
Опубліковано: The National Technical University of Ukraine "Igor Sikorsky Kyiv Polytechnic Institute" 2018
Теми:
Онлайн доступ:http://journal.iasa.kpi.ua/article/view/131984
Теги: Додати тег
Немає тегів, Будьте першим, хто поставить тег для цього запису!
Назва журналу:System research and information technologies

Репозитарії

System research and information technologies
id journaliasakpiua-article-131984
record_format ojs
institution System research and information technologies
collection OJS
language Ukrainian
topic group decision making
expert estimation
index of consistency of expert estimates
spectral approach
consistency threshold
expert feedback
поддержка принятия групповых решений
экспертное оценивание
индекс согласованности экспертных оценок
спектральный подход
порог согласованности
обратная связь с экспертом
підтримка прийняття групових рішень
експертне оцінювання
індекс узгодженості експертних оцінок
спектральний підхід
поріг узгодженості
зворотний зв'язок з експертом
spellingShingle group decision making
expert estimation
index of consistency of expert estimates
spectral approach
consistency threshold
expert feedback
поддержка принятия групповых решений
экспертное оценивание
индекс согласованности экспертных оценок
спектральный подход
порог согласованности
обратная связь с экспертом
підтримка прийняття групових рішень
експертне оцінювання
індекс узгодженості експертних оцінок
спектральний підхід
поріг узгодженості
зворотний зв'язок з експертом
Tsyganok, Vitaliy V.
Roik, Pavlo D.
Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень
topic_facet group decision making
expert estimation
index of consistency of expert estimates
spectral approach
consistency threshold
expert feedback
поддержка принятия групповых решений
экспертное оценивание
индекс согласованности экспертных оценок
спектральный подход
порог согласованности
обратная связь с экспертом
підтримка прийняття групових рішень
експертне оцінювання
індекс узгодженості експертних оцінок
спектральний підхід
поріг узгодженості
зворотний зв'язок з експертом
format Article
author Tsyganok, Vitaliy V.
Roik, Pavlo D.
author_facet Tsyganok, Vitaliy V.
Roik, Pavlo D.
author_sort Tsyganok, Vitaliy V.
title Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень
title_short Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень
title_full Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень
title_fullStr Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень
title_full_unstemmed Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень
title_sort метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень
title_alt Method for evaluating and improving of the expert estimates consistency in group decision-making
Метод определения и повышения согласованности экспертных оценок при поддержке принятия групповых решений
description The issue of the assessment of an expert estimates consistency level for group decision making is considered. An analysis of bibliographic sources testifies that despite the availability of multiple practical tools and solutions for assessing the consistency index, all such methods have considerable shortcomings affecting significantly the accurateness of research results. The goal of this research paper is the development of a method for assessing the consistency between expert estimates, with the elimination of a number of key shortcomings of existing methods. It is suggested to calculate the consistency index using a spectral approach, under which expert estimates are presented as a spectrum on a bounded, continuous or discrete scale. The index is calculated as the normalized value of the sum of distances between expert estimates for all possible estimate pairs. This formula for calculating the consistency index has been tested for the function of squared pairwise differences in estimate pairs. The conducted analysis shows that the function of distance fits better for a detailed practical analysis of consistency between expert estimates. Imitation modeling has been carried out, and an evaluation has been offered for a threshold consistency value above which aggregation of expert estimates becomes possible. In order to make it possible to raise the level of consistency, a procedure for gathering feedback from an expert is proposed, provided that no pressure is put on him or her.
publisher The National Technical University of Ukraine "Igor Sikorsky Kyiv Polytechnic Institute"
publishDate 2018
url http://journal.iasa.kpi.ua/article/view/131984
work_keys_str_mv AT tsyganokvitaliyv methodforevaluatingandimprovingoftheexpertestimatesconsistencyingroupdecisionmaking
AT roikpavlod methodforevaluatingandimprovingoftheexpertestimatesconsistencyingroupdecisionmaking
AT tsyganokvitaliyv metodopredeleniâipovyšeniâsoglasovannostiékspertnyhocenokpripodderžkeprinâtiâgruppovyhrešenij
AT roikpavlod metodopredeleniâipovyšeniâsoglasovannostiékspertnyhocenokpripodderžkeprinâtiâgruppovyhrešenij
AT tsyganokvitaliyv metodviznačennâtapídviŝennâuzgodženostíekspertnihocínokzapídtrimannâprijnâttâgrupovihríšenʹ
AT roikpavlod metodviznačennâtapídviŝennâuzgodženostíekspertnihocínokzapídtrimannâprijnâttâgrupovihríšenʹ
first_indexed 2024-04-08T15:06:17Z
last_indexed 2024-04-08T15:06:17Z
_version_ 1795779489957937152
spelling journaliasakpiua-article-1319842019-01-17T13:31:43Z Method for evaluating and improving of the expert estimates consistency in group decision-making Метод определения и повышения согласованности экспертных оценок при поддержке принятия групповых решений Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень Tsyganok, Vitaliy V. Roik, Pavlo D. group decision making expert estimation index of consistency of expert estimates spectral approach consistency threshold expert feedback поддержка принятия групповых решений экспертное оценивание индекс согласованности экспертных оценок спектральный подход порог согласованности обратная связь с экспертом підтримка прийняття групових рішень експертне оцінювання індекс узгодженості експертних оцінок спектральний підхід поріг узгодженості зворотний зв'язок з експертом The issue of the assessment of an expert estimates consistency level for group decision making is considered. An analysis of bibliographic sources testifies that despite the availability of multiple practical tools and solutions for assessing the consistency index, all such methods have considerable shortcomings affecting significantly the accurateness of research results. The goal of this research paper is the development of a method for assessing the consistency between expert estimates, with the elimination of a number of key shortcomings of existing methods. It is suggested to calculate the consistency index using a spectral approach, under which expert estimates are presented as a spectrum on a bounded, continuous or discrete scale. The index is calculated as the normalized value of the sum of distances between expert estimates for all possible estimate pairs. This formula for calculating the consistency index has been tested for the function of squared pairwise differences in estimate pairs. The conducted analysis shows that the function of distance fits better for a detailed practical analysis of consistency between expert estimates. Imitation modeling has been carried out, and an evaluation has been offered for a threshold consistency value above which aggregation of expert estimates becomes possible. In order to make it possible to raise the level of consistency, a procedure for gathering feedback from an expert is proposed, provided that no pressure is put on him or her. Рассмотрена проблема определения уровня согласованности оценок при групповой экспертизе. Задачей исследования является разработка метода определения уровня согласованности экспертных оценок, лишенного ряда ключевых недостатков, присущих имеющимся методам. Предложен индекс согласованности определять с использованием спектрального подхода, согласно которому оценки экспертов отображаются в виде спектра на ограниченной, непрерывной или дискретной шкале. Индекс вычислен как нормированное значение суммы расстояний между оценками экспертов для всех возможных пар оценок. Индекс согласованности исследован также для функции квадрата попарных разностей в парах оценок. Проведенный анализ подтвердил, что функция расстояния более пригодна для основательного практического определения согласованности экспертных оценок. Проведено имитационное моделирование и предложено определение порогового значения согласованности, выше которого становится допустимой агрегация экспертных оценок. Для улучшения уровня согласованности предложена процедура обратной связи с экспертом при условии непричинения какого-либо давления на него. Розглянуто проблему визначення рівня узгодженості оцінок під час групової експертизи. Завданням дослідження є розроблення методу визначення узгодженості експертних оцінок, позбавленого ряду ключових недоліків, притаманних наявним методам. Запропоновано індекс узгодженості визначати з використанням спектрального підходу, відповідно до якого оцінки експертів відображуються у вигляді спектра на обмеженій, безперервній або дискретній шкалі. Індекс обчислено як нормоване значення суми відстаней між оцінками експертів для всіх можливих пар оцінок. Індекс узгодженості досліджено також для функції квадрата попарних різниць у парах оцінок. Проведений аналіз засвідчив, що функція відстані більш придатна для ґрунтовного практичного визначення узгодженості експертних оцінок. Проведено імітаційне моделювання та запропоновано визначення порогового значення узгодженості, вище якого стає допустимою агрегація експертних оцінок. Для підвищення рівня узгодженості запропоновано процедуру зворотного зв’язку з експертом за умови неспричинення будь-якого тиску на нього. The National Technical University of Ukraine "Igor Sikorsky Kyiv Polytechnic Institute" 2018-10-16 Article Article application/pdf http://journal.iasa.kpi.ua/article/view/131984 10.20535/SRIT.2308-8893.2018.3.10 System research and information technologies; No. 3 (2018); 110-121 Системные исследования и информационные технологии; № 3 (2018); 110-121 Системні дослідження та інформаційні технології; № 3 (2018); 110-121 2308-8893 1681-6048 uk http://journal.iasa.kpi.ua/article/view/131984/149359 Copyright (c) 2021 System research and information technologies