Метод поліпшення узгодженості оцінок експертів у ході діалогу

Розроблено метод поліпшення узгодженості експертних оцінок, яка визначається на основі спектрального підходу, коли множина оцінок подається у вигляді складових спектра на дискретній або неперервній додатній шкалі. Визначено рівень (поріг) узгодженості експертних оцінок, що є достатнім для їхньої агр...

Full description

Saved in:
Bibliographic Details
Published in:Реєстрація, зберігання і обробка даних
Date:2018
Main Authors: Роїк, П.Д., Циганок, В.В.
Format: Article
Language:Ukrainian
Published: Інститут проблем реєстрації інформації НАН України 2018
Subjects:
Online Access:https://nasplib.isofts.kiev.ua/handle/123456789/168702
Tags: Add Tag
No Tags, Be the first to tag this record!
Journal Title:Digital Library of Periodicals of National Academy of Sciences of Ukraine
Cite this:Метод поліпшення узгодженості оцінок експертів у ході діалогу / П.Д. Роїк, В.В. Циганок // Реєстрація, зберігання і обробка даних. — 2018. — Т. 20, № 2. — С. 85–95. — Бібліогр.: 12 назв. — укр.

Institution

Digital Library of Periodicals of National Academy of Sciences of Ukraine
_version_ 1862733005991182336
author Роїк, П.Д.
Циганок, В.В.
author_facet Роїк, П.Д.
Циганок, В.В.
citation_txt Метод поліпшення узгодженості оцінок експертів у ході діалогу / П.Д. Роїк, В.В. Циганок // Реєстрація, зберігання і обробка даних. — 2018. — Т. 20, № 2. — С. 85–95. — Бібліогр.: 12 назв. — укр.
collection DSpace DC
container_title Реєстрація, зберігання і обробка даних
description Розроблено метод поліпшення узгодженості експертних оцінок, яка визначається на основі спектрального підходу, коли множина оцінок подається у вигляді складових спектра на дискретній або неперервній додатній шкалі. Визначено рівень (поріг) узгодженості експертних оцінок, що є достатнім для їхньої агрегації. Запропонований метод у діалозі з експертами, при зведенні до мінімуму тиску на них, дозволяє підвищити узгодженість їхніх оцінок до достатнього рівня та значно підвищує ймовірність успішного завершення експертиз. Разработан метод улучшения согласованности экспертных оценок, которая определяется на основе спектрального подхода, когда множество оценок подается в виде составляющих спектра на дискретной или непрерывной положительной шкале. Определен уровень (порог) согласованности экспертных оценок, достаточный для их агрегации. Предложенный метод в диалоге с экспертами, при сведении к минимуму давления на них, позволяет повысить согласованность их оценок до достаточного уровня и значительно повышает вероятность успешного завершения экспертиз. Improving the quality of recommendations for decision-makers in weakly structured domains is affected largely by the reliability of results of appraisals carried out during the construction of models of weakly structured systems based on which recommendations for decision-makers are generated. The result of every group expert appraisal is a rating obtained through the aggregation of individual expert estimates. Usually, aggregation is justified when the consistency rate achieves a certain level (threshold of consistency), otherwise the result would be unreliable. It is offered a non-statistical approach to the evaluation of consistency, using which an expert estimates are compared in pairs (simplest case). A rate of consistency between the expert estimates sufficient for their aggregation has been identified. The evaluation of this threshold value is based on a statistical approach, triangular distribution and distribution function. A method has been developed for improving the consistency between expert estimates: it is based on a spectral approach where a set of estimates is presented as spectrum elements on a discrete or a continuous positive scale. The method offered for dialogue with experts minimizes tensions put on them, and thus allows raising the consistency between their estimates to a sufficient level and increases significantly the probability of successful completion of appraisal. The technique offered allows optimizing the task of raising the rate of consistency both thanks to using more reliable algorithms for evaluating such consistency and thanks to the developed step-by-step procedure of improvements through questions asked to experts, allowing at the same time to minimize the impact of the subjectivity of their estimates on the reliability of research. The method uses optimization allowing for automatic identification of the shortest path for improving consistency. This allows addressing each expert only once, without putting tensions on him/her by indicating the desired direction in changing his/her estimate. The methods and procedures offered have been implemented in a web-distributed system of support for decision-making and have been approved in practical appraisals.
first_indexed 2025-12-07T19:35:22Z
format Article
fulltext
id nasplib_isofts_kiev_ua-123456789-168702
institution Digital Library of Periodicals of National Academy of Sciences of Ukraine
issn 1560-9189
language Ukrainian
last_indexed 2025-12-07T19:35:22Z
publishDate 2018
publisher Інститут проблем реєстрації інформації НАН України
record_format dspace
spelling Роїк, П.Д.
Циганок, В.В.
2020-05-08T15:06:36Z
2020-05-08T15:06:36Z
2018
Метод поліпшення узгодженості оцінок експертів у ході діалогу / П.Д. Роїк, В.В. Циганок // Реєстрація, зберігання і обробка даних. — 2018. — Т. 20, № 2. — С. 85–95. — Бібліогр.: 12 назв. — укр.
1560-9189
DOI: https://doi.org/10.35681/1560-9189.2018.20.2.142915
https://nasplib.isofts.kiev.ua/handle/123456789/168702
519.816
Розроблено метод поліпшення узгодженості експертних оцінок, яка визначається на основі спектрального підходу, коли множина оцінок подається у вигляді складових спектра на дискретній або неперервній додатній шкалі. Визначено рівень (поріг) узгодженості експертних оцінок, що є достатнім для їхньої агрегації. Запропонований метод у діалозі з експертами, при зведенні до мінімуму тиску на них, дозволяє підвищити узгодженість їхніх оцінок до достатнього рівня та значно підвищує ймовірність успішного завершення експертиз.
Разработан метод улучшения согласованности экспертных оценок, которая определяется на основе спектрального подхода, когда множество оценок подается в виде составляющих спектра на дискретной или непрерывной положительной шкале. Определен уровень (порог) согласованности экспертных оценок, достаточный для их агрегации. Предложенный метод в диалоге с экспертами, при сведении к минимуму давления на них, позволяет повысить согласованность их оценок до достаточного уровня и значительно повышает вероятность успешного завершения экспертиз.
Improving the quality of recommendations for decision-makers in weakly structured domains is affected largely by the reliability of results of appraisals carried out during the construction of models of weakly structured systems based on which recommendations for decision-makers are generated. The result of every group expert appraisal is a rating obtained through the aggregation of individual expert estimates. Usually, aggregation is justified when the consistency rate achieves a certain level (threshold of consistency), otherwise the result would be unreliable. It is offered a non-statistical approach to the evaluation of consistency, using which an expert estimates are compared in pairs (simplest case). A rate of consistency between the expert estimates sufficient for their aggregation has been identified. The evaluation of this threshold value is based on a statistical approach, triangular distribution and distribution function. A method has been developed for improving the consistency between expert estimates: it is based on a spectral approach where a set of estimates is presented as spectrum elements on a discrete or a continuous positive scale. The method offered for dialogue with experts minimizes tensions put on them, and thus allows raising the consistency between their estimates to a sufficient level and increases significantly the probability of successful completion of appraisal. The technique offered allows optimizing the task of raising the rate of consistency both thanks to using more reliable algorithms for evaluating such consistency and thanks to the developed step-by-step procedure of improvements through questions asked to experts, allowing at the same time to minimize the impact of the subjectivity of their estimates on the reliability of research. The method uses optimization allowing for automatic identification of the shortest path for improving consistency. This allows addressing each expert only once, without putting tensions on him/her by indicating the desired direction in changing his/her estimate. The methods and procedures offered have been implemented in a web-distributed system of support for decision-making and have been approved in practical appraisals.
uk
Інститут проблем реєстрації інформації НАН України
Реєстрація, зберігання і обробка даних
Експертні системи та підтримка прийняття рішень
Метод поліпшення узгодженості оцінок експертів у ході діалогу
Метод улучшения согласованности оценок экспертов в процессе диалога
A method for improving the expert estimates consistency in the dialogue process
Article
published earlier
spellingShingle Метод поліпшення узгодженості оцінок експертів у ході діалогу
Роїк, П.Д.
Циганок, В.В.
Експертні системи та підтримка прийняття рішень
title Метод поліпшення узгодженості оцінок експертів у ході діалогу
title_alt Метод улучшения согласованности оценок экспертов в процессе диалога
A method for improving the expert estimates consistency in the dialogue process
title_full Метод поліпшення узгодженості оцінок експертів у ході діалогу
title_fullStr Метод поліпшення узгодженості оцінок експертів у ході діалогу
title_full_unstemmed Метод поліпшення узгодженості оцінок експертів у ході діалогу
title_short Метод поліпшення узгодженості оцінок експертів у ході діалогу
title_sort метод поліпшення узгодженості оцінок експертів у ході діалогу
topic Експертні системи та підтримка прийняття рішень
topic_facet Експертні системи та підтримка прийняття рішень
url https://nasplib.isofts.kiev.ua/handle/123456789/168702
work_keys_str_mv AT roíkpd metodpolípšennâuzgodženostíocínokekspertívuhodídíalogu
AT ciganokvv metodpolípšennâuzgodženostíocínokekspertívuhodídíalogu
AT roíkpd metodulučšeniâsoglasovannostiocenokékspertovvprocessedialoga
AT ciganokvv metodulučšeniâsoglasovannostiocenokékspertovvprocessedialoga
AT roíkpd amethodforimprovingtheexpertestimatesconsistencyinthedialogueprocess
AT ciganokvv amethodforimprovingtheexpertestimatesconsistencyinthedialogueprocess