Метод поліпшення узгодженості оцінок експертів у ході діалогу

Розроблено метод поліпшення узгодженості експертних оцінок, яка визначається на основі спектрального підходу, коли множина оцінок подається у вигляді складових спектра на дискретній або неперервній додатній шкалі. Визначено рівень (поріг) узгодженості експертних оцінок, що є достатнім для їхньої агр...

Повний опис

Збережено в:
Бібліографічні деталі
Опубліковано в: :Реєстрація, зберігання і обробка даних
Дата:2018
Автори: Роїк, П.Д., Циганок, В.В.
Формат: Стаття
Мова:Ukrainian
Опубліковано: Інститут проблем реєстрації інформації НАН України 2018
Теми:
Онлайн доступ:https://nasplib.isofts.kiev.ua/handle/123456789/168702
Теги: Додати тег
Немає тегів, Будьте першим, хто поставить тег для цього запису!
Назва журналу:Digital Library of Periodicals of National Academy of Sciences of Ukraine
Цитувати:Метод поліпшення узгодженості оцінок експертів у ході діалогу / П.Д. Роїк, В.В. Циганок // Реєстрація, зберігання і обробка даних. — 2018. — Т. 20, № 2. — С. 85–95. — Бібліогр.: 12 назв. — укр.

Репозитарії

Digital Library of Periodicals of National Academy of Sciences of Ukraine
id nasplib_isofts_kiev_ua-123456789-168702
record_format dspace
spelling Роїк, П.Д.
Циганок, В.В.
2020-05-08T15:06:36Z
2020-05-08T15:06:36Z
2018
Метод поліпшення узгодженості оцінок експертів у ході діалогу / П.Д. Роїк, В.В. Циганок // Реєстрація, зберігання і обробка даних. — 2018. — Т. 20, № 2. — С. 85–95. — Бібліогр.: 12 назв. — укр.
1560-9189
DOI: https://doi.org/10.35681/1560-9189.2018.20.2.142915
https://nasplib.isofts.kiev.ua/handle/123456789/168702
519.816
Розроблено метод поліпшення узгодженості експертних оцінок, яка визначається на основі спектрального підходу, коли множина оцінок подається у вигляді складових спектра на дискретній або неперервній додатній шкалі. Визначено рівень (поріг) узгодженості експертних оцінок, що є достатнім для їхньої агрегації. Запропонований метод у діалозі з експертами, при зведенні до мінімуму тиску на них, дозволяє підвищити узгодженість їхніх оцінок до достатнього рівня та значно підвищує ймовірність успішного завершення експертиз.
Разработан метод улучшения согласованности экспертных оценок, которая определяется на основе спектрального подхода, когда множество оценок подается в виде составляющих спектра на дискретной или непрерывной положительной шкале. Определен уровень (порог) согласованности экспертных оценок, достаточный для их агрегации. Предложенный метод в диалоге с экспертами, при сведении к минимуму давления на них, позволяет повысить согласованность их оценок до достаточного уровня и значительно повышает вероятность успешного завершения экспертиз.
Improving the quality of recommendations for decision-makers in weakly structured domains is affected largely by the reliability of results of appraisals carried out during the construction of models of weakly structured systems based on which recommendations for decision-makers are generated. The result of every group expert appraisal is a rating obtained through the aggregation of individual expert estimates. Usually, aggregation is justified when the consistency rate achieves a certain level (threshold of consistency), otherwise the result would be unreliable. It is offered a non-statistical approach to the evaluation of consistency, using which an expert estimates are compared in pairs (simplest case). A rate of consistency between the expert estimates sufficient for their aggregation has been identified. The evaluation of this threshold value is based on a statistical approach, triangular distribution and distribution function. A method has been developed for improving the consistency between expert estimates: it is based on a spectral approach where a set of estimates is presented as spectrum elements on a discrete or a continuous positive scale. The method offered for dialogue with experts minimizes tensions put on them, and thus allows raising the consistency between their estimates to a sufficient level and increases significantly the probability of successful completion of appraisal. The technique offered allows optimizing the task of raising the rate of consistency both thanks to using more reliable algorithms for evaluating such consistency and thanks to the developed step-by-step procedure of improvements through questions asked to experts, allowing at the same time to minimize the impact of the subjectivity of their estimates on the reliability of research. The method uses optimization allowing for automatic identification of the shortest path for improving consistency. This allows addressing each expert only once, without putting tensions on him/her by indicating the desired direction in changing his/her estimate. The methods and procedures offered have been implemented in a web-distributed system of support for decision-making and have been approved in practical appraisals.
uk
Інститут проблем реєстрації інформації НАН України
Реєстрація, зберігання і обробка даних
Експертні системи та підтримка прийняття рішень
Метод поліпшення узгодженості оцінок експертів у ході діалогу
Метод улучшения согласованности оценок экспертов в процессе диалога
A method for improving the expert estimates consistency in the dialogue process
Article
published earlier
institution Digital Library of Periodicals of National Academy of Sciences of Ukraine
collection DSpace DC
title Метод поліпшення узгодженості оцінок експертів у ході діалогу
spellingShingle Метод поліпшення узгодженості оцінок експертів у ході діалогу
Роїк, П.Д.
Циганок, В.В.
Експертні системи та підтримка прийняття рішень
title_short Метод поліпшення узгодженості оцінок експертів у ході діалогу
title_full Метод поліпшення узгодженості оцінок експертів у ході діалогу
title_fullStr Метод поліпшення узгодженості оцінок експертів у ході діалогу
title_full_unstemmed Метод поліпшення узгодженості оцінок експертів у ході діалогу
title_sort метод поліпшення узгодженості оцінок експертів у ході діалогу
author Роїк, П.Д.
Циганок, В.В.
author_facet Роїк, П.Д.
Циганок, В.В.
topic Експертні системи та підтримка прийняття рішень
topic_facet Експертні системи та підтримка прийняття рішень
publishDate 2018
language Ukrainian
container_title Реєстрація, зберігання і обробка даних
publisher Інститут проблем реєстрації інформації НАН України
format Article
title_alt Метод улучшения согласованности оценок экспертов в процессе диалога
A method for improving the expert estimates consistency in the dialogue process
description Розроблено метод поліпшення узгодженості експертних оцінок, яка визначається на основі спектрального підходу, коли множина оцінок подається у вигляді складових спектра на дискретній або неперервній додатній шкалі. Визначено рівень (поріг) узгодженості експертних оцінок, що є достатнім для їхньої агрегації. Запропонований метод у діалозі з експертами, при зведенні до мінімуму тиску на них, дозволяє підвищити узгодженість їхніх оцінок до достатнього рівня та значно підвищує ймовірність успішного завершення експертиз. Разработан метод улучшения согласованности экспертных оценок, которая определяется на основе спектрального подхода, когда множество оценок подается в виде составляющих спектра на дискретной или непрерывной положительной шкале. Определен уровень (порог) согласованности экспертных оценок, достаточный для их агрегации. Предложенный метод в диалоге с экспертами, при сведении к минимуму давления на них, позволяет повысить согласованность их оценок до достаточного уровня и значительно повышает вероятность успешного завершения экспертиз. Improving the quality of recommendations for decision-makers in weakly structured domains is affected largely by the reliability of results of appraisals carried out during the construction of models of weakly structured systems based on which recommendations for decision-makers are generated. The result of every group expert appraisal is a rating obtained through the aggregation of individual expert estimates. Usually, aggregation is justified when the consistency rate achieves a certain level (threshold of consistency), otherwise the result would be unreliable. It is offered a non-statistical approach to the evaluation of consistency, using which an expert estimates are compared in pairs (simplest case). A rate of consistency between the expert estimates sufficient for their aggregation has been identified. The evaluation of this threshold value is based on a statistical approach, triangular distribution and distribution function. A method has been developed for improving the consistency between expert estimates: it is based on a spectral approach where a set of estimates is presented as spectrum elements on a discrete or a continuous positive scale. The method offered for dialogue with experts minimizes tensions put on them, and thus allows raising the consistency between their estimates to a sufficient level and increases significantly the probability of successful completion of appraisal. The technique offered allows optimizing the task of raising the rate of consistency both thanks to using more reliable algorithms for evaluating such consistency and thanks to the developed step-by-step procedure of improvements through questions asked to experts, allowing at the same time to minimize the impact of the subjectivity of their estimates on the reliability of research. The method uses optimization allowing for automatic identification of the shortest path for improving consistency. This allows addressing each expert only once, without putting tensions on him/her by indicating the desired direction in changing his/her estimate. The methods and procedures offered have been implemented in a web-distributed system of support for decision-making and have been approved in practical appraisals.
issn 1560-9189
url https://nasplib.isofts.kiev.ua/handle/123456789/168702
citation_txt Метод поліпшення узгодженості оцінок експертів у ході діалогу / П.Д. Роїк, В.В. Циганок // Реєстрація, зберігання і обробка даних. — 2018. — Т. 20, № 2. — С. 85–95. — Бібліогр.: 12 назв. — укр.
work_keys_str_mv AT roíkpd metodpolípšennâuzgodženostíocínokekspertívuhodídíalogu
AT ciganokvv metodpolípšennâuzgodženostíocínokekspertívuhodídíalogu
AT roíkpd metodulučšeniâsoglasovannostiocenokékspertovvprocessedialoga
AT ciganokvv metodulučšeniâsoglasovannostiocenokékspertovvprocessedialoga
AT roíkpd amethodforimprovingtheexpertestimatesconsistencyinthedialogueprocess
AT ciganokvv amethodforimprovingtheexpertestimatesconsistencyinthedialogueprocess
first_indexed 2025-12-07T19:35:22Z
last_indexed 2025-12-07T19:35:22Z
_version_ 1850879374804385792