Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень
The issue of the assessment of an expert estimates consistency level for group decision making is considered. An analysis of bibliographic sources testifies that despite the availability of multiple practical tools and solutions for assessing the consistency index, all such methods have considerable...
Збережено в:
Дата: | 2018 |
---|---|
Автори: | , |
Формат: | Стаття |
Мова: | Ukrainian |
Опубліковано: |
The National Technical University of Ukraine "Igor Sikorsky Kyiv Polytechnic Institute"
2018
|
Теми: | |
Онлайн доступ: | http://journal.iasa.kpi.ua/article/view/131984 |
Теги: |
Додати тег
Немає тегів, Будьте першим, хто поставить тег для цього запису!
|
Назва журналу: | System research and information technologies |
Репозитарії
System research and information technologiesid |
journaliasakpiua-article-131984 |
---|---|
record_format |
ojs |
institution |
System research and information technologies |
collection |
OJS |
language |
Ukrainian |
topic |
group decision making expert estimation index of consistency of expert estimates spectral approach consistency threshold expert feedback поддержка принятия групповых решений экспертное оценивание индекс согласованности экспертных оценок спектральный подход порог согласованности обратная связь с экспертом підтримка прийняття групових рішень експертне оцінювання індекс узгодженості експертних оцінок спектральний підхід поріг узгодженості зворотний зв'язок з експертом |
spellingShingle |
group decision making expert estimation index of consistency of expert estimates spectral approach consistency threshold expert feedback поддержка принятия групповых решений экспертное оценивание индекс согласованности экспертных оценок спектральный подход порог согласованности обратная связь с экспертом підтримка прийняття групових рішень експертне оцінювання індекс узгодженості експертних оцінок спектральний підхід поріг узгодженості зворотний зв'язок з експертом Tsyganok, Vitaliy V. Roik, Pavlo D. Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень |
topic_facet |
group decision making expert estimation index of consistency of expert estimates spectral approach consistency threshold expert feedback поддержка принятия групповых решений экспертное оценивание индекс согласованности экспертных оценок спектральный подход порог согласованности обратная связь с экспертом підтримка прийняття групових рішень експертне оцінювання індекс узгодженості експертних оцінок спектральний підхід поріг узгодженості зворотний зв'язок з експертом |
format |
Article |
author |
Tsyganok, Vitaliy V. Roik, Pavlo D. |
author_facet |
Tsyganok, Vitaliy V. Roik, Pavlo D. |
author_sort |
Tsyganok, Vitaliy V. |
title |
Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень |
title_short |
Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень |
title_full |
Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень |
title_fullStr |
Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень |
title_full_unstemmed |
Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень |
title_sort |
метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень |
title_alt |
Method for evaluating and improving of the expert estimates consistency in group decision-making Метод определения и повышения согласованности экспертных оценок при поддержке принятия групповых решений |
description |
The issue of the assessment of an expert estimates consistency level for group decision making is considered. An analysis of bibliographic sources testifies that despite the availability of multiple practical tools and solutions for assessing the consistency index, all such methods have considerable shortcomings affecting significantly the accurateness of research results. The goal of this research paper is the development of a method for assessing the consistency between expert estimates, with the elimination of a number of key shortcomings of existing methods. It is suggested to calculate the consistency index using a spectral approach, under which expert estimates are presented as a spectrum on a bounded, continuous or discrete scale. The index is calculated as the normalized value of the sum of distances between expert estimates for all possible estimate pairs. This formula for calculating the consistency index has been tested for the function of squared pairwise differences in estimate pairs. The conducted analysis shows that the function of distance fits better for a detailed practical analysis of consistency between expert estimates. Imitation modeling has been carried out, and an evaluation has been offered for a threshold consistency value above which aggregation of expert estimates becomes possible. In order to make it possible to raise the level of consistency, a procedure for gathering feedback from an expert is proposed, provided that no pressure is put on him or her. |
publisher |
The National Technical University of Ukraine "Igor Sikorsky Kyiv Polytechnic Institute" |
publishDate |
2018 |
url |
http://journal.iasa.kpi.ua/article/view/131984 |
work_keys_str_mv |
AT tsyganokvitaliyv methodforevaluatingandimprovingoftheexpertestimatesconsistencyingroupdecisionmaking AT roikpavlod methodforevaluatingandimprovingoftheexpertestimatesconsistencyingroupdecisionmaking AT tsyganokvitaliyv metodopredeleniâipovyšeniâsoglasovannostiékspertnyhocenokpripodderžkeprinâtiâgruppovyhrešenij AT roikpavlod metodopredeleniâipovyšeniâsoglasovannostiékspertnyhocenokpripodderžkeprinâtiâgruppovyhrešenij AT tsyganokvitaliyv metodviznačennâtapídviŝennâuzgodženostíekspertnihocínokzapídtrimannâprijnâttâgrupovihríšenʹ AT roikpavlod metodviznačennâtapídviŝennâuzgodženostíekspertnihocínokzapídtrimannâprijnâttâgrupovihríšenʹ |
first_indexed |
2024-04-08T15:06:17Z |
last_indexed |
2024-04-08T15:06:17Z |
_version_ |
1795779489957937152 |
spelling |
journaliasakpiua-article-1319842019-01-17T13:31:43Z Method for evaluating and improving of the expert estimates consistency in group decision-making Метод определения и повышения согласованности экспертных оценок при поддержке принятия групповых решений Метод визначення та підвищення узгодженості експертних оцінок за підтримання прийняття групових рішень Tsyganok, Vitaliy V. Roik, Pavlo D. group decision making expert estimation index of consistency of expert estimates spectral approach consistency threshold expert feedback поддержка принятия групповых решений экспертное оценивание индекс согласованности экспертных оценок спектральный подход порог согласованности обратная связь с экспертом підтримка прийняття групових рішень експертне оцінювання індекс узгодженості експертних оцінок спектральний підхід поріг узгодженості зворотний зв'язок з експертом The issue of the assessment of an expert estimates consistency level for group decision making is considered. An analysis of bibliographic sources testifies that despite the availability of multiple practical tools and solutions for assessing the consistency index, all such methods have considerable shortcomings affecting significantly the accurateness of research results. The goal of this research paper is the development of a method for assessing the consistency between expert estimates, with the elimination of a number of key shortcomings of existing methods. It is suggested to calculate the consistency index using a spectral approach, under which expert estimates are presented as a spectrum on a bounded, continuous or discrete scale. The index is calculated as the normalized value of the sum of distances between expert estimates for all possible estimate pairs. This formula for calculating the consistency index has been tested for the function of squared pairwise differences in estimate pairs. The conducted analysis shows that the function of distance fits better for a detailed practical analysis of consistency between expert estimates. Imitation modeling has been carried out, and an evaluation has been offered for a threshold consistency value above which aggregation of expert estimates becomes possible. In order to make it possible to raise the level of consistency, a procedure for gathering feedback from an expert is proposed, provided that no pressure is put on him or her. Рассмотрена проблема определения уровня согласованности оценок при групповой экспертизе. Задачей исследования является разработка метода определения уровня согласованности экспертных оценок, лишенного ряда ключевых недостатков, присущих имеющимся методам. Предложен индекс согласованности определять с использованием спектрального подхода, согласно которому оценки экспертов отображаются в виде спектра на ограниченной, непрерывной или дискретной шкале. Индекс вычислен как нормированное значение суммы расстояний между оценками экспертов для всех возможных пар оценок. Индекс согласованности исследован также для функции квадрата попарных разностей в парах оценок. Проведенный анализ подтвердил, что функция расстояния более пригодна для основательного практического определения согласованности экспертных оценок. Проведено имитационное моделирование и предложено определение порогового значения согласованности, выше которого становится допустимой агрегация экспертных оценок. Для улучшения уровня согласованности предложена процедура обратной связи с экспертом при условии непричинения какого-либо давления на него. Розглянуто проблему визначення рівня узгодженості оцінок під час групової експертизи. Завданням дослідження є розроблення методу визначення узгодженості експертних оцінок, позбавленого ряду ключових недоліків, притаманних наявним методам. Запропоновано індекс узгодженості визначати з використанням спектрального підходу, відповідно до якого оцінки експертів відображуються у вигляді спектра на обмеженій, безперервній або дискретній шкалі. Індекс обчислено як нормоване значення суми відстаней між оцінками експертів для всіх можливих пар оцінок. Індекс узгодженості досліджено також для функції квадрата попарних різниць у парах оцінок. Проведений аналіз засвідчив, що функція відстані більш придатна для ґрунтовного практичного визначення узгодженості експертних оцінок. Проведено імітаційне моделювання та запропоновано визначення порогового значення узгодженості, вище якого стає допустимою агрегація експертних оцінок. Для підвищення рівня узгодженості запропоновано процедуру зворотного зв’язку з експертом за умови неспричинення будь-якого тиску на нього. The National Technical University of Ukraine "Igor Sikorsky Kyiv Polytechnic Institute" 2018-10-16 Article Article application/pdf http://journal.iasa.kpi.ua/article/view/131984 10.20535/SRIT.2308-8893.2018.3.10 System research and information technologies; No. 3 (2018); 110-121 Системные исследования и информационные технологии; № 3 (2018); 110-121 Системні дослідження та інформаційні технології; № 3 (2018); 110-121 2308-8893 1681-6048 uk http://journal.iasa.kpi.ua/article/view/131984/149359 Copyright (c) 2021 System research and information technologies |