The 14 reference contexts in paper A. Kryanev V., S. Semenov S., А. Крянев В., С. Семенов С. (2016) “К ВОПРОСУ О КАЧЕСТВЕ И НАДЕЖНОСТИ ЭКСПЕРТНЫХ ОЦЕНОК ПРИ ОПРЕДЕЛЕНИИ ТЕХНИЧЕСКОГО УРОВНЯ СЛОЖНЫХ СИСТЕМ // ON THE ISSUE OF QUALITY AND RELIABILITY OF EXPERT JUDGMENTS IN DETERMINING THE ENGINEERING LEVEL OF COMPLEX SYSTEMS” / spz:neicon:sustain:y:2013:i:4:p:90-109

  1. Start
    1548
    Prefix
    проведении научно-исследовательских и опытно-конструкторских работ, изучении информации по научно-технической литературе, периодической печати и патентной документации в конкретной области в сочетании с современными математическими методами обработки знаний, являются важным инструментом определения общих тенденций развития, параметров и технического уровня сложных технических систем (СТС)
    Exact
    [1,2]
    Suffix
    . Как правило, метод экспертных оценок используется при исследовании объектов и проблем, анализ развития которых либо полностью, либо частично не поддается формализации, т.е. для которых трудно разработать адекватную модель.
    (check this in PDF content)

  2. Start
    1908
    Prefix
    Как правило, метод экспертных оценок используется при исследовании объектов и проблем, анализ развития которых либо полностью, либо частично не поддается формализации, т.е. для которых трудно разработать адекватную модель. Процедура проведения методов экспертной оценки достаточно подробно описана в научно-технической литературе, например, в монографии
    Exact
    [1]
    Suffix
    с рассмотрением вопросов формирования экспертных групп, компетентности экспертов, форм работы с экспертами, формированием анкет и таблиц экспертных оценок, а также анализа и обработки экспертной оценки, в том числе с учетом согласованности мнений отдельных экспертов.
    (check this in PDF content)

  3. Start
    2826
    Prefix
    Многочисленную группу квалифицированных экспертов трудно сформировать и организовать ее работу. Разработан метод оценки технического уровня СТС с участием экспертов, основные положения которого приведены в работе
    Exact
    [3-5]
    Suffix
    . В данном случае при оценке технического уровня СТС эксперты обычно привлекаются для формирования показателей и определения весомости (важности) оценочных показателей, рангов исследуемых объектов. Важным обстоятельством для исследователя является обоснованный подбор экспертов.
    (check this in PDF content)

  4. Start
    4730
    Prefix
    В биноминальной модели выбора оценивание характеристики происходит тем точнее, чем объем выборки больше. Считается, что минимальный из обычно использующихся объемов выборки в маркетинговых исследованиях составляет 100 единиц
    Exact
    [6]
    Suffix
    . Поскольку стоимость исследования растет как линейная функция объема выборки, а точность повышается как квадратный корень из этого объема, то верхняя граница объема выборки выбирается также с учетом экономических соображений.
    (check this in PDF content)

  5. Start
    5366
    Prefix
    Однако при резком увеличении числа экспертов в группе снижается уровень их компетентности, что может существенно снизить точность экспертных оценок. Для расчета численности группы экспертов можно воспользоваться известным соотношением, которое используется при вычислении погрешности наблюдений
    Exact
    [7]
    Suffix
    N = tp2/ ε12 где N – число экспертов в группе, ε1 = ε /S – предельно допустимая относительная ошибка экспертной оценки, S – среднеквадратическое отклонение распределения оценок какой-либо величины, tp – коэффициент Стьюдента, определяющий ширину доверительного интервала и зависимость от величины вероятности оценки P (tp – табулированная величина).
    (check this in PDF content)

  6. Start
    6682
    Prefix
    Связь точности и надежности результатов оценки срока наступления события с числом экспертов в группе N Определение допустимых размеров экспертной группы В связи с отмеченным выше, рассмотрим пример, приведенный в работе
    Exact
    [1]
    Suffix
    . Пусть по некоторому обсуждаемому вопросу имеется 100 специалистов. В связи с трудностями организацион ного характера мы можем сформировать группу экспер тов до 50 человек. Для простоты расчета будем считать экспертом такого специалиста, стаж работы которого по данной проблеме не менее 10 лет.
    (check this in PDF content)

  7. Start
    8789
    Prefix
    Таким образом, в группе из 100 специалистов с вероятностью Р = 0,9545, 36 специалистов могут привлекаться в качестве экспертов. В результате исследований по определению численного состава экспертной группы, приведенных в монографии
    Exact
    [8]
    Suffix
    , получена зависимость β /α = f (k) (β – вариация, α – ширина доверительного интервала, k – число экспертов) для выбранной доверительной вероятности p (рис. 2). Допустим, что требуется сформировать группу экспертов для оценки технического уровня СТС, причем желательно, чтобы доверительный интервал экспертной оценки неметрического критерия составлял с вероятностью 0,8 не более ± 10% от среднего
    (check this in PDF content)

  8. Start
    11355
    Prefix
    Следует отметить, что в настоящее время объективные способы оценки экспертов практически труднореализуемы и в основном используются до статочно субъективные способы – самооценка, взаимооценка и оценка на основании документов о квалификации. В первом приближении можно оценить качество эксперта, используя формализованный подход к оценке его профессиональной компетентнос ти
    Exact
    [7]
    Suffix
    . Профессиональную компетентность, во-первых, определяют уровнем научной квалификации эксперта Кк, который приблизительно можно оценить по табл. 2. Во-вторых, компетентность эксперта определяется структурой аргу ментов, послуживших ему основанием для оценки (коэффициент kа), и степенью его знакомства с исследуемым вопросом (коэффициент Кз).
    (check this in PDF content)

  9. Start
    14535
    Prefix
    Как правило, коэффициент профессиональной компетентности экс перта учитывается в виде множителя при соответствующей оценке, т.е. как бы служит коэффициентом значимости (весомости) мнения данного эксперта (например, при оценке значений весовой функции в матрицах уровней потребительских свойств и удельных затрат). В работе
    Exact
    [8]
    Suffix
    степень компетентности характеризует коэффициент авторитета, под которым понимают число, показывающее, с каким весом следует включать в статистическую обработку количественные оценки данного эксперта.
    (check this in PDF content)

  10. Start
    15075
    Prefix
    Коэффициент авторитета выражается в нормированной форме, при этом максимальному авторитету приписывается коэффициент μ = 1, а менее компетентные эксперты имеют μ ∠ 1, некомпетентный эксперт должен получить μ = 0. Для выбора рационального способа определения коэффициен тов авторитета экспертов по результатам самой экспертизы в работе
    Exact
    [8]
    Suffix
    предложен подход по формированию этого коэффициента. 1. Коэффициен т авторитета должен лежать в пределах 0 – 1. 2. Коэффициен т авторитета должен быть монотонной функцией разности между индивидуальной и средней оценкой исследуемого критерия системы. 3.
    (check this in PDF content)

  11. Start
    15849
    Prefix
    Коэффициен т авторитета должен определяться с использованием экспертных оценок исследуемого критерия для всех конкурирующих систем в данной за даче выбора. Особенности положения 3 и 5 подробно представлены в работе
    Exact
    [8]
    Suffix
    . Нами разработан подход, который предлагает использовать информацию об уровнях возможных ошибок экспертов и учитывать ее при получении сводной оценки группы экспертов [9]. Уточнение среднего значения с использованием дополнительных сведений, заложенных в анализируемой выборке данных, можно выполнить на основе схемы Байеса [10].
    (check this in PDF content)

  12. Start
    16019
    Prefix
    Особенности положения 3 и 5 подробно представлены в работе [8]. Нами разработан подход, который предлагает использовать информацию об уровнях возможных ошибок экспертов и учитывать ее при получении сводной оценки группы экспертов
    Exact
    [9]
    Suffix
    . Уточнение среднего значения с использованием дополнительных сведений, заложенных в анализируемой выборке данных, можно выполнить на основе схемы Байеса [10]. Подход Байеса широко используется как инструмент теории вероятности в различных областях.
    (check this in PDF content)

  13. Start
    16177
    Prefix
    Нами разработан подход, который предлагает использовать информацию об уровнях возможных ошибок экспертов и учитывать ее при получении сводной оценки группы экспертов [9]. Уточнение среднего значения с использованием дополнительных сведений, заложенных в анализируемой выборке данных, можно выполнить на основе схемы Байеса
    Exact
    [10]
    Suffix
    . Подход Байеса широко используется как инструмент теории вероятности в различных областях. Для получения консолидированной оценки группы экспертов предлагается метод, учитывающий «расстояния» оценок экспертов до агрегированной оценки, на основе которых оценкам экспертов приписываются различные веса.
    (check this in PDF content)

  14. Start
    21105
    Prefix
    Число таких специалистов зависит от их профессионального уровня и решается, в частности, с помощью равенства (9). Для агрегирования мнений экспертов принимается среднегеометриче ское, вычисляемое по следующему соотношению
    Exact
    [11]
    Suffix
    A12... ,nn a aaaijij ij ij= (10) где Aija – агрегированная оценка элемента, принадлежащая i-й строке и j-му столбцу матрицы парных сравнений; п – число матриц парных сравнений, каждая из которых составлена одним экспертом. 1∗ При объединении оценок нескольких экспертов часто ориентируются на утверждение, что количество экспертов должно быть достаточно большим.
    (check this in PDF content)