Чтобы обеспечить эти условия, эксперт должен быть не заинтересован в результате экспертизы, иметь психологическую независимость ji высокую квалификацию. Подбор эксперта оказывается ответственной проблемой, При этом учитывают связь профиля деятельности эксперта с анализируемой проблемой, совпадение рекомендаций и фактических результатов в ранее выполняемых экспертом работах, степень согласованности мнения эксперта с другими экспертами, опыт экспертной деятельности, квалификационный уровень эксперта, степень доступа эксперта к необходимой дополнительной информации. [c.243]
Результаты экспертного опроса считаются надежными, если согласованность мнений экспертов высокая. Степень согласованности мнений экспертов оценивается коэффициентом конкордации (W) [c.176]
Определить степень согласованности мнений экспертов по параметрам образцов техники. Различным параметрам присвоены следующие ранги [c.177]
Пример. Необходимо определить степень согласованности мнения [c.137]
Пример. Определить степень согласованности мнений пяти экспертов, результаты ранжирования которыми семи объектов приведены в табл. 1.2. [c.20]
Степень согласованности мнений экспертов при оценке i-й сферы деятельности организации оценим коэффициентом вариации [c.98]
При этом, если все v(< 0,3, то степень согласованности мнений экспертов считается удовлетворительной. [c.98]
Статистические методы обработки информации (определение средних оценок, величин ошибок, степени согласованности мнений респондентов и т.д.) [c.116]
Естественно, ответы экспертов не бывают одинаковыми. Они варьируют вокруг средней величины. Чем эта вариация меньше, тем больше уверенность в том, что прогноз будет более точным. Поэтому при каждой экспертизе рассчитывается степень согласованности мнений экспертов, которая выражается в процентах [c.108]
Обычно считается, что если степень согласованности мнений экспертов превышает 50%, то экспертизе можно доверять. [c.109]
Расчет степени согласованности мнений экспертов [c.109]
Компьютерная программа позволяет обобщать и сопоставлять полученные результаты, а также определять степень согласованности мнений. После завершения работы подводятся итоги и анализируются выводы, сделанные студентами. [c.548]
В отличие от метода комиссий и мозговой атаки процедура метода Дельфи предусматривает полную изоляцию экспертов и анонимность их мнений. Опрос производится в форме анкет для выяснения относительной важности и сроков свершения ожидаемых событий в прогнозируемой области. Групповое решение принимается не по мнению большинства, а на основе статистической обработки индивидуальных оценок с учетом степени согласованности мнений экспертов, которая характеризуется относительной величиной размаха индивидуальных оценок. [c.117]
Степень согласованности мнений экспертов можно считать удовлетворительной. [c.214]
Если степень согласованности мнений экспертов оказывается неудовлетворительной, принимают специальные меры для ее повышения. Сводятся они, в основном, к проведению тренировок с обсуждением результатов и разбором ошибок. Если возможности для предварительной подготовки экспертов нет, измерение экспертным методом проводится по методу Дельфы. Характерными чертами этого метода являются [c.214]
Групповая сценка может считаться достаточно надежной только при условии хорошей согласованности ответов опрашиваемых специалистов. Поэтому статистическая обработка информации, полученной от респондентов, должна включать в себя оценку степени согласованности мнений для подтверждения правомерности данных опроса. [c.82]
Оценка степени согласованности мнений экспертов осуществляется только при изучении вопроса о роли экспертных оценок в принятии решений. [c.120]
Значение коэффициента вариации (V) не должно превышать 0,1-0,2, т.е. разброс индивидуальных оценок экспертов не должен быть больше 10-20%. Чем ближе показатель степени согласованности (L) к 0, тем хуже согласованы мнения экспертов, показатель степени согласованности должен быть не меньше 5 L > 5. Для количественной оценки степени согласованности мнений экспертов возможно также применение коэффициента координации W, который позволяет оценить, насколько согласованы между собой ряды оценок экспертов. Практически достоверность можно считать удовлетворительной, если W = 0,7-0,8. [c.105]
Наиболее часто для этих целей используют коэффициент конкордации (согласия), величина которого позволяет судить о степени согласованности мнений экспертов и, как следствие, о достоверности их оценок. [c.78]
Чем меньше значение этого коэффициента, тем выше степень согласованности мнений экспертов. [c.293]
Для оценки степени согласованности мнений всей группы экспертов в целом применяется коэффициент конкордации. Коэффициент конкордации определяется в следующей последовательности вначале вычисляется среднее арифметическое M[Sfg] сумм рангов оценок всех объектов 283 [c.293]
Коэффициент конкордации изменяется в пределах от 0 до 1. Увеличение значения коэффициента конкордации соответствует увеличению степени согласованности мнений экспертов. Небольшое значение коэффициента конкордации может быть обусловлено либо действительно невысокой степенью согласованности мнений экспертов, либо существованием групп с высокой согласованностью противоположных мнений. [c.294]
Коллективная экспертная оценка может проводиться с учетом и без учета компетентности экспертов. В первом случае значения С,у умножаются на значение коэффициента компетентности. Затем оценивается степень согласованности мнений экспертов и показатель репрезентативности экспертных оценок по формулам, приведенным выше. Целесообразно представить результаты обработки экспертных оценок в виде соответствующих таблиц. [c.300]
Коэффициент конкордации изменяется в пределах от О до 1. Увеличение значения коэффициента конкордации соответствует увеличению степени согласованности мнений экспертов. [c.301]
Определение коэффициента конкордации W, позволяющего оценить степень согласованности мнений экспертов (при отсутствии равных рангов) [c.201]
При разработке сценария всегда возникает неопределенность из-за того, что принимающие в этом участие специалисты имеют субъективные суждения. Ценность сценария тем выше, чем меньше степень неопределенности, т.е. чем больше степень согласованности мнений экспертов. При экспертной оценке следует включать вопросы [c.155]
Пример. Определить степень согласованности мнений 5 экспертов, которым предложено из 7 показателей установить приоритеты их влияния на стоимость объекта оценки (табл. 7.2.1). [c.125]
Полученное значение свидетельствует о высокой степени согласованности мнений экспертов. [c.125]
Экспертные методы оценки предназначены для анализа исходной информации, содержащей некоторые качественные характеристики исследуемого фактора или процесса. Оценки содержат мнения специалистов, полученные путём анкетного опроса. По результатам анкетирования определяется степень согласованности экспертных оценок, их взаимные корреляции, а также предпочтение тому или иному пункту анкеты (направлению развития, инвестиционному проекту и т.д.). Целью обработки материалов коллективной экспертной оценки является определение показателя обобщённого мнения и степени согласованности мнений экспертов по каждому вопросу, а также выявление экспертов, высказавших оригинальные суждения (резко отличающиеся от мнения большинства), и групп экспертов, придерживающихся противоположных точек зрения. [c.60]
При обработке результатов экспертных оценок по относительной важности направлений среднее значение, дисперсия и коэффициент вариации вычисляются для каждого оцениваемого направления. Кроме того, вычисляется коэффициент конкордации, показывающий степень согласованности мнений экспертов по важности каждого из оцениваемых направлений, и коэффициенты парной ранговой корреляции, определяющие степень согласованности экспертов друг с другом. [c.30]
Для выявления степени согласованности мнений экспертов используется коэффициент парной ранговой корреляции [c.31]
Оценка степени согласованности (Dj) мнений экспертов по коэффициенту вариации (Vj) [c.30]
Качество экспертной оценки, ее надежность и обоснованность в решающей степени зависят от выбранной методики сбора и обработки индивидуальных экспертных значений, которая включает в себя 1) выбор состава экспертов и оценку их компетентности 2) составление анкет для опроса экспертов 3) получение экспертных заключений 4) оценку согласованности мнений экспертов 5) оценку достоверности результатов и 6) программу для обработки экспертных заключений. [c.118]
Полигон степени влияния отобранных факторов на изучаемый показатель - распределение суммы рангов влияния факторов на изучаемый показатель. Если соединить его начало и конец прямой линией, то можно видеть, насколько далека полученная ранжировка от ранжировки, соответствующей полной согласованности мнений опрашиваемых экспертов. При этом возможны три случая ранжировки [c.123]
Задача В анализ интегральной (совокупной) согла" сованности рассматриваемых переменных и их условная ранжировка по критерию степени тесноты связи каждой из них, с остальными переменными. Подобные задачи возникают, например, при исследовании степени согласованности мнений группы экспертов и при попытках условного упорядочения последних по их компетентности. В основе этого анализа лежит расчет коэффициента совокупной согласованности — коэффициента конкордации для различных комбинаций исследуемых переменных (см. п. 2.3). [c.103]
События 2 и 5 поделили 2-е и 3-е места. Значит, им присваиваем ранг (2 -f- 3) 2 = 2,5. События 3, 4, 6 поделили 4-е, 5-е, 6-е места, им присваиваем ранг (4 + + 5 + 6) 3 = 5. Таким образом, мы получили матрицу рангов a.is , данных каждому /-му параметру s-м экспертом. Прежде чем выбирать далее наиболее важные 15 параметров, следует оценить степень согласованности мнений экспертов1. В качестве меры согласованности можно принять коэффициент конкордации, который в самом общем виде может быть определен как [c.120]
В качестве показателей степени согласованности мнений экспертов применяют коэффициент вариации, коэффициент парной ранговой корреляции (Спирме-на или Кендалла), коэффициент конкордации (дисперсионный или энтропийный). [c.292]
Индивидуальный вариант может реализовываться по одношаговой и двухэтапной схемам. В любом случае непосредственному процессу опроса экспертов на предмет получения среднеарифметической балльной оценки предшествует проверка согласованности мнений отобранных экспертов. Для этого экспертам предлагают ранжировать единичные показатели уровня качества по степени из значимости. Значимость выражается порядковым предпочтением. [c.60]
Далее на основе собранных анкет вычисляют математическое ожидание, дисперсию, другие параметры экспертных оценок по каждому вопросу. По этим параметрам делают выводы о степени влияния факторов, согласованности мнения экспертов и т. д. Обычно этот метод используют, когда нет возможности прямого определения характеристик степени влияния факторов. Процедура вычислений при использовании метода экспертных оценок состоит из четырех этапов1. [c.77]
Для оценки степени согласованности между мнениями двух экспертов (или двух групп экспертов) применяется коэффициент ранговой корреляции по Спирмену [c.64]
Недостатки используемых методов обработки экспертной информации. При анализе результат обращать внимание на степень согласованности экспертных оценок, получаемых при ее провед( мнений комиссии может отражать тот факт, что к проведению экспертизы отнеслись формально значения ее результатам, либо что эксперты при вынесении заключений и оценок проявили высокую С другой стороны, несогласованность экспертных суждений может означать разное понимание экспер а также участие в работе комиссии экспертов с противоположными интересами. [c.77]
При учете мнения экспертов необходимо оценить среднюю степень согласованности их. Для этой цели можно использовать коэффициент конкордации (от лат. on orda - согласовываться), который вычисляется по формуле [c.123]