Апостериорные методы оценки качества эксперта базируются на использовании информации о его суждениях, имевших место в экспертизах, проведенных с его участием. К таким методам относятся [c.284]
Тестовые методы оценки качества эксперта нацелены на распознавание профессиональной пригодности испытуемого, а также выявление наличия необходимых навыков и опыта для эффективного участия в работе экспертной комиссии. Для успешного проведения тестового эксперимента необходимо выполнение следующих условий целенаправленность содержания теста на конкретные объекты экспертизы наличие шкалы, позволяющей оценить степень точности оценок эксперта максимальная приближенность тестовых оценок эксперта их истинным значениям возможность установления допустимых пределов отклонений оценок эксперта от их истинных значений минимальная вероятность случайного угадывания экспертом истинной оценки. [c.284]
Методы оценки качества эксперта. Выбор экспертов является достаточно трудной задачей. [c.26]
Большинство существующих методов оценки качества экспертов можно разделить на пять групп эвристические - оценки, назначаемые человеком и основанные на предположении правильности отражения качества эксперта через оценку окружающих или самооценку. [c.27]
Сущность этого метода оценки качества экспертов заключается в том, что в целях уменьшения субъективности оценка компетентности каждого эксперта определяется как средняя из оценок, назначенных всеми остальными экспертами. Установлено, что существует тесная взаимосвязь между компетентностью эксперта и усредненной оценкой его, полученной от коллег. [c.30]
Комбинированные оценки - оценки, основанные на совместном использовании разных методов оценки качества экспертов. [c.32]
Вопрос выбора числовых значений шкалы интервалов при экспертном методе оценки качества еще не стал объектом исследования. Между тем погрешность оценок в значительной степени зависит от числа различимых экспертом градаций. [c.129]
Этап 6. Опрос экспертов, который проводится техническими работниками. Предварительно эксперты должны ознакомиться с методами оценки качества (приложение 1.8.3). [c.122]
Квалиметрическая компетентность обеспечивает четкое понимание экспертом подхода к оценке качества продукции как к мере удовлетворения его потребностей людей знание методов оценки качества, особенно экспертных методов умение пользоваться различными типами оцениваемых шкал, различая при этом достаточно большое число их градаций. [c.27]
Оценка объективности эксперта является важной характеристикой его качества. В ряде случаев, например, при оценке конкретных образцов продукции, необъективность экспертов может привести к существенному искажению результатов. Однако пока еще нет специфических методов оценки объективности экспертов и на практике довольствуются косвенной оценкой по отклонению от среднего мнения экспертов. [c.31]
Оценка квалиметрической компетентности эксперта - оценка теоретических знаний методов оценки качества и умения их применять. Оценка теоретической подготовки эксперта может проводиться путем контроля знаний с использованием тестов в определенной области знаний. [c.31]
Необходимость применения комплексных оценок качества экспертов объясняется разнообразием предъявляемых к ним требований, каждое из которых может быть оценено одним или несколькими методами. Однако не каждый применяемый метод позволяет дать количественную характеристику отдельных свойств эксперта. К тому же степень разработки и применимости предлагаемых методов неодинакова. [c.32]
ЭКСПЕРТНАЯ ОЦЕНКА — количественная или качественная оценка управленческой ситуации, не подлежащей непосредственной оценке со стороны руководителя в виду ее нестандартности, основанная на заключении специалистов. Достоверность Э.о. зависит от индивидуальных качеств эксперта (профессиональных и практических знаний, стажа и опыта работы в конкретной сфере деятельности и др.). В практике управления широко используются методы индивидуальной и коллективной Э.о. Достоверность Э.о. повышается за счет правильной формализации исходной информации, корректного подбора экспертов, соблюдения принципов и процедур экспертного опроса. [c.439]
Недостатки экспертного метода оценки коэффициентов значимости могут быть отчасти преодолены социологическим исследованием. Эксперты при всей своей квалификации не в состоянии адекватно воспроизвести тонкую нюансировку отношения массового потребителя к различной комбинации свойств товара. Поэтому весьма надежным источником сведений для оценки уровня качества продукции является организованный сбор отзывов потребителей. [c.62]
Модели самооценки дают возможность описать TQM с помощью критериев премии по качеству, предусматривающих всестороннюю бальную оценку деятельности организации в области качества. Критерии оценочных моделей в области качества, как правило, разделены на две группы по критериям первой группы оцениваются возможности организации по решению проблемы качества, а по второй группе - результаты реализации этих возможностей. Во всех странах в основном используются одинаковые методы и схемы оценки схема самооценки и оценки внешними экспертами. [c.16]
В качестве источников информации используются первичный и статистический учет оперативный учет по центрам ответственности и затрат учет изменений норм и отклонений от них, если реально внедрен нормативный метод учета затрат и калькулирования материалы непосредственных наблюдений за деятельностью беседы с руководителями подразделений и исполнителями оценки специалистов-экспертов и др. [c.16]
Гносеологическая необходимость в опыте для объективизации оценок подтверждается их вероятностным (стохастическим) характером. Рост числа соглашений или фактов оценки позволяет рассматривать их уже в качестве не детерминированных, а именно стохастических величин, не зависящих друг от друга и от воздействия на них методов измерения. Стохастическими оценки становятся еще и потому, что их расчеты отделяются друг от друга и не корреспондируют между собой. В самом деле, при единичном соглашении об оценке методы покупателя и продавца или нескольких экспертов согласуются или по крайней мере сопоставляются их результаты. При множественности, территориальной и временной разъединенности сделок методы оценок не сравниваются между собой и появляется возможность трактовки оценок как стохастического процесса, в результате которого в качестве объективной оценки принимается ее математическое ожидание. [c.208]
Экспертный способ. Этот способ основан на усреднении оценок весомостей, даваемых группой экспертов. Он отличается гибкостью, наглядностью и привычностью. Действительно, каждому человеку на протяжении всей его жизни не раз приходилось участвовать в решении той или иной проблемы путем голосования, что можно рассматривать как одну из простейших разновидностей экспертного способа. Благодаря отмеченным преимуществам экспертного способа, весомость Mj определяется на его основе в подавляющем большинстве методик оценки качества. Однако незнание теории и правил проведения экспертизы приводит к тому, что в некоторых методиках допускаются серьезные ошибки. Поэтому данный метод более подробно будет рассмотрен в следующем параграфе. [c.48]
Основные положения еще одного экспертного метода комплексной оценки качества, также базирующегося на некоторых приемах метода распознавания образов , описаны в статье [166]. Предлагаемый метод основан на моделировании эвристических процессов мышления экспертов, происходящих при оценке качества, и может рассматриваться как дальнейшее развитие экспертных методов. [c.91]
Органолептические свойства (основные при оценке качества пищевых продуктов) могут быть более или менее обоснованно определены и количественно измерены только путем осреднения субъективных оценок, даваемых экспертами. В силу этого единственно приемлемым методом оценки является балльная система. [c.243]
Оценку показателей конкурентоспособности производят по 10 бальной системе. Высшая оценка выставляется за высшее достижение среди конкурентов включая и свою фирму. При выставлении балов по конкретному показателю не идет о каких то утвержденных кем-то критериях, эталонах и т.д. Присвоенные баллы позволяют в результате составления соответствующих показателей работы конкурирующих фирм методом экспертных оценок. В качестве экспертов обычно выступают ведущие специалисты по производству соответствующих товаров. Экспертов как правило, должно быть несколько. [c.14]
Несмотря на то, что существует большое количество разных подходов к оценке, все они страдают общим недостатком — субъективностью, решение во многом зависит от того, кто использует метод, или того, кого он привлекает в качестве эксперта. [c.227]
Основным среди комплекса методов оценки в предложенной системе отбора является метод экспертной оценки. Программа получила название Эксперт . Методика групповой экспертной оценки предназначена для сбора информации о степени выраженности (развитии) личностных и профессионально важных для руководителей качеств и способностей личности. [c.282]
Аналитический метод основывается на анализе документов претендента (анкетные данные, характеристики, рекомендации и т.д.) Экспертный метод предусматривает экспертную оценку качеств претендента на основе тестирования, решения имитационных задач, моделирующих ситуации наиболее приближенные к реальному и т. д. Для этого определяются критерии и их весовые коэффициенты, Затем привлекается группа высококвалифицированных, независимых экспертов для оценки (в баллах) по итогам ответов тестов, собеседования и т. п. [c.45]
В стране образован и аккредитован Госстандартом СССР Государственный испытательный центр (ГИЦ ПС ВТ) в области ПС, опиравшийся на нормативные документы, в том числе стандарты, утвержденные директивными органами, Госстандартом СССР и другими ведомствами. В настоящее время ГИЦ ПС ВТ предлагает к использованию программный комплекс автоматизации процесса испытаний и оценки качества (ПК АОК), представляющий собой автоматизированную систему поддержки процесса оценки качества экспертным методом с возможностью интеграции с инструментальными средствами. Система устанавливает требования к специализации и квалификации экспертов по каждому показателю качества и обеспечивает работу экспертов в сетевом режиме. В системе предусмотрено применение математического аппарата обработки мнений группы экспертов по оценке наиболее важных показателей. Эксперту также предоставляется перечень актуальных нормативных документов по предметным областям. Программный комплекс построен на основе архитектуры клиент-сервер и обеспечивает распределенную работу в сети. Оценка производится на основе многоуровневой иерархической модели показателей качества. [c.371]
Существуют два основных метода проведения подобной оценки -тестирование и экспертные оценки. Тестирование позволяет провести всестороннюю и достаточно объективную оценку преемников, однако требует специально разработанных тестов (для каждой ключевой должности), профессиональных психологов, способных интерпретировать их результаты, и значительных затрат времени оцениваемых кандидатов. Это сложный и дорогой метод, котором пользуются достаточно крупные и преуспевающие организации. Второй метод заключается в оценке экспертами индивидуальных характеристик кандидата по каждой из составляющих портрета идеального сотрудника. В качестве экспертов выступают хорошо знающие преемника сотрудники организации его непосредственный руководитель, коллеги, директор по человеческим ресурсам. Достоинство метода экспертных оценок состоит в его простоте и низких издержках, недостатки связаны со сложностью получения объективных оценок и сохранения конфиденциальности. [c.180]
Организатор и специалист формируют экспертную группу из числа участников игры, учитывая их служебное положение, стаж и характер работы в данной области. К экспертам предъявляют наиболее высокие требования. Они должны быть информированы об особенностях производства, сбыта, потребления данной продукции. Желательно выбирать в состав экспертов тех работников, которые по характеру своей деятельности заинтересованы в результатах экспертизы. Эксперты должны быть деловиты, контактны, объективны, т. е. способны самостоятельно оценить качество продукции и затем при поступлении информации от других экспертов внести коррективы в свою оценку. Если эксперт в ходе игры проявил необъективность — значительно завысил или занизил оценку — он должен быть исключен из группы. Руководитель группы должен следить за мотивированностью оценок. В группу экспертов следует включать специалистов, занимающихся разными вопросами производством, сбытом, потреблением конкретной продукции производственно-технического назначения, так как экспертной группе необходимы знания о состоянии производства данной продукции, возможностях и перспективах его развития, знание свойств продукции и показателей ее качества для потребителей, особенностей снабжения, требований потребителей, условий и характера потребления. Ведущий в организационный период знакомит экспертов с методологией оценки качества и методами. [c.120]
В методике оценка руководителей проводится на основе метода экспертных оценок. В качестве экспертов выступают лица, связанные с оцениваемыми руководителями непосредственными служебными контактами и обладающие необходимыми личностными качествами. [c.155]
Метод экспертных оценок реализуется путем обработки мнений опытных предпринимателей и специалистов, выступающих в качестве экспертов. Каждому работающему эксперту предоставляется перечень возможных рисков и предлагается оценить вероятность их наступления. Затем оценки экспертов подвергаются анализу на противоречивость они должны удовлетворять следующему правилу максимально допустимая разница между оценками двух экспертов по любому виду риска не должна превышать 50%, что позволяет устранить кардинальные различия в оценках вероятности наступления отдельного вида риска. В результате получают экспертные оценки вероятностей допустимого критического риска или наиболее вероятных потерь. При этом методе большое значение имеет правильный подбор экспертов. [c.69]
Главная особенность (и трудность) описываемой ситуации заключается в том, что при получении (сборе) исходной статистической информации вида (В.1) значения результирующего показателя у могут быть получены только с помощью специально организованного экспертного опроса (значения частных критериев эффективности х(1 х(2 . .., х(р как правило, поддаются непосредственному измерению). Форма экспертной информации о значениях у может быть различной (балльные оценки, упорядочения, парные сравнения [11]). Но только располагая наряду со статистической информацией об X = (х(1>, х(2 . .., х(р)) одной из форм соответствующей экспертной информации об у, мы можем статистически построить некоторую аппроксимацию /Ср (X) — f (X 6) для агрегированного критерия эффективности функционирования системы и использовать ее затем в качестве формализованного метода оценки интегрального понятия эффективности (т. е. уже без привлечения экспертов, а лишь по частным критериям х(1 х(2 . .., х(р)). Такая модифицированная форма использования аппарата статистического исследования зависимостей предложена в [91, развита в [68] и носит название экспертно-статистического метода построения неизвестной целевой функции. [c.29]
При использовании экспертных методов очевидно, что чем больше привлекается экспертов, тем выше объективность результата оценки. Однако привлечение большого числа квалифицированных экспертов и высокая трудоемкость экспертных работ повышает стоимость проведения оценок качества. Поэтому, чтобы снизить трудоемкость работ экспертов, используют метод рангов, который предусматривает только ранжирование показателей, а не их численное определение экспертами. [c.151]
Метод ПАТТЕРН имеет многочисленные модификации и аналоги ПРОФАЙЛ, КПЕ, КУЕСТ, ПРОПЛЕН, МАРСЕН, ЭЛЕКТРЕ, КАРИ и др. Однако и рассматриваемый метод не лишен недостатков недостаточная определенность в построении дерева решений , отсутствие барьеров в проявлении конформизма, нечеткость в подборе экспертов и др. Из-за своих недостатков этот метод не получает в нашей литературе полного признания (в частности, при оценке качества товаров). [c.214]
Оценить качество менеджмента предприятия возможно по результатам его деятельности. Наиболее полная и понятная для всех заинтересованных лиц информация о деятельности менеджмента предприятия аккумулируется в бухгалтерской отчетности предприятия. Экспертная оценка бухгалтерского баланса и денежного потока предприятия могут быть выполнены по методу Ю.С. Масленченкова (см. Приложение 5). Результаты оценки экспертом бухгалтерского баланса и денежного потока предприятия описываются функциями оценки качества бухгалтерского баланса Окк и денежного потока Окдп, которые определяются следующими формулами [c.100]
Зависимость, определяемая экспертным методом. В работе американских исследователей Д. Р. Д. Уайта, Д. Л. Скотта, и Р. Н. Шульца [195]—авторов (метода ПОЕД , предназначенного для оценки качества различных систем оружия, оценки свойств находятся по специальным оценочным таблицам, составленным на основе обработки мнения экспертов. При этом каждому количественному значению оценки Л // соответствует определенная качественная оценка. Например, /С/у- = 1 соответствует оценка отлично , Ktf = 0,9 — хорошо , Kij = 0,6 — благоприятно ,, Kij = О — неприемлемо . [c.76]
В существующих методах экспертной оценки качества человек (эксперт) в своем сознании формирует образы явлений внешнего мира, классифицирует и группирует их по ряду признаков. К таким образам можно условно отнести и совокупность комплексных оценок качества объектов, лежащих в определенном интервале значений. который можно рассматривать как класс качества данных объектов. Однако, по мнению авторов этого метода, человеческий мозг нельзя признать наиболее надежной распознающей системой, так как способность создавать образ находится под влиянием индивидуальности человека. Строй нервной деятельнос- [c.89]
Американская практика аттестации исключает типизацию процедур этого процесса, ориентирована на индивидуальные оценки. Периодичность — разная на различных предприятиях (в среднем — 1 раз в год). Однако, в период реорганизации фирмы Крайслер ее руководитель Ли Якокка проводил аттестацию ежеквартально. В качестве экспертов-оценщиков обычно выступает менеджер-управляющий, т. е. начальник аттестуемого, экспертный совет (комитет контролеров), коллеги и подчиненные аттестуемого, сторонние специалисты, сам аттестуемый (метод самооценки). Возможны комбинации из этих групп оценщиков. Для установления оценки используются различные методы опросные листы с закрытыми или полуоткрытыми вопросами, графические шкалы рейтинга работников, анкеты различных типов, методы наблюдения за работниками (особенно в критических ситуациях), методы классификации, попарного сравнения качеств, управления по целям45. Последний связан с постановкой перед сотрудником конкретных измеряемых и развивающих целей, что делается в сотрудничестве начальника и работника, с последующей оценкой степени достижения целей. [c.259]
ЭКСПЕРТНЫЕ ОЦЕНКИ — ко личественные и (или) порядковые оценки процессов, явлений, не поддающихся непосредственному измерению основаны на заключениях специалистов. Достоверность заключений зависит от индивидуальных качеств эксперта. В практике прогнозирования широко используются методы индивидуальной и коллективной Э. о. с последующей обработкой полученных Э. о. статистическими методами. Наиболее эффективно использование нескольких последовательных итераций (туров) групповых Э. о. Достоверность Э. о. [c.393]
МЕТОД АГАФЬИ ТИХОНОВНЫ (ПАРАМЕТРИЧЕСКИЙ МЕТОД). Вспомним, как мучилась Агафья Тихоновна из пьесы Н. В. Гоголя Женитьба , выбирая жениха ...если бы губы Никанора Ивановича да приставить к носу Ивана Кузьмича, да взять сколько-нибудь развязности, какая у Бал-тазара Балтазарыча, да, пожалуй, прибавить к этому еще дородности Ивана Павловича — я бы тогда тотчас решилась... Я думаю, лучше всего кинуть жребий... Что в данном случае делает Агафья Тихоновна Выступая в качестве эксперта , она сравнивает технико-экономические и потребительские параметры кандидатов в мужья. Будь Агафья Тихоновна более усидчива и доведи она дело оценки кандидатов до конца, [c.121]
Из приведенных данных видно, что в рассмотренном при мере с точки зрения оценки статистической значимости связи между строками и столбцами традиционный и логлинейный подходы к таблицам сопряженности, с одной стороны, и дуальное шкалирование, с другой стороны, дают сравнительно близкие результаты. Однако в общем случае связь между этими двумя методами пока достаточно не изучена [232, с. 181]. 3.2.6. Таблицы объект—многомерный отклик . Исходные данные для дву-, трех- и более мерных таблиц сопряженности часто могут.быть представлены в форме таблицы, в которой строки соответствуют объектам (субъектам), столбцы — градациям используемых классификационных переменных и на пересечении i-й строки и столбца, соответствующего у-й градации /-и переменной, стоит 1 или 0 в зависимости от того, имеет ли место для 1-го объекта эта градация (1) или нет (0). В случае когда для ряда объектов значения одной из переменных не определены (измерены в непредусмотренной шкале, не измерены, утрачены при обработке и т. п.), либо исключают из таблицы соответствующие объекты, либо вводят для этой переменной дополнительную градацию значение не определено . Пример фрагмента таблицы, которая могла бы быть исходной для данных примера п. 3.2.2, дан в табл. 3.4, где приведена оценка организации труда в четырех лабораториях (таблица Единица наблюдения —(лаборатория, оценка, эксперт) ). В качестве единицы наблюдения (объекта) в ней взято резюме из карточки, заполняемой экспертом после обследования и оценки организации труда в лаборатории, в котором указываются номер лаборатории, оценка, номер эксперта. [c.139]
IV о технике опроса все Э. м. делятся на два способа когда проводящий опрос технич. работник имеет дело сразу с группой экспертов п когда он контактирует непосредственно с каждым экспертом в отдельности. В последнем случае используются технпч. приёмы, в основном совпадающие с применяемыми в социологии (где они впервые и были предложены) интервью, интервью-анкета, анкетирование, смешанное анкетирование. Каждый из этих приёмов отличается от других по степени информационного взаимодействия между экспертом и технич. работником по степени объективности выносимых экспертных суждений но трудоёмкости проведения экспертного опроса. Поэтому 1) не может быть однозначной рекомендация по применению к.-л. одного технич. приёма во всех ситуациях экспертного опроса 2) если не лимитируется общая длительность проведения опроса, то целесообразно применить интервью-анкету или смешанное анкетирование 3) если ограничения на длительность опроса не позволяют применить интервью-анкету, то целесообразно воспользоваться смешанным анкетированием 4) если количество экспертов велико или сложно собрать их вместе, можно применить анкетирование 5) интервью используется как исключение в тех случаях, когда, напр., по условиям.решаемой задачи необходимо иметь экспертные опросы/выраженные в количеств, форме, а эксперт с трудом оперирует такими оценками при ответе на задаваемые ему вопросы, а также когда решается новая задача и каждый последующий вопрос зависит от ответа на предыдущий 6) если требуется обеспечить участие в экспертизе каждого выделенного эксперта, методу заочного анкетирования следует предпочесть методы очного опроса. Перечисленные осн. черты методологии проведения экспертного опроса свойственны Э. м., in пользуемому для решения практически любых задач. Имеются и спецпфич. черты в зависимости от характера решаемых с помощью Э. м. задач. Краткое описание специфпч. черт даётся ниже применительно к решению Э. м. задач оценки качества продукции. Подобные задачи есть задачи квалиметрии. [c.557]
Наиболее значительным достижением метода межгосударственной неправовой гармонизации являются Принципы международных коммерческих договоров ЮНИДРУА. Доктрина (А.С. Комаров и др.) дает Принципам ЮНИДРУА исключительно высокую оценку, рассматривая их в качестве совершенно нового универсального подхода к унификации права международной торговли, как прообраз будущего частноправового порядка. Принципы не являются международным договором или типовым контрактом, согласованным коммерческими предпринимательскими структурами. Хотя они разрабатывались под эгидой межправительственного ЮНИДРУА, фактически — это плод высококвалифицированной работы наиболее компетентных, выступавших в личном качестве экспертов-юристов из многих стран с разными правовыми системами. В результате удалось согласовать общие подходы заключения и реализации международных, но именно коммерческих контрактов, приемлемые для всех правовых систем. Оставлены пока за рамками Правил вопросы недействительности контрактов ввиду различий их решения в разных национальных правовых системах, также как регулирование внутренних, в том числе потребительских сделок. Гибкость подхода к регулированию коммерческих контрактов (возможно, и не только международных) в полном соответствии с принципом свободы воли сторон договора, позволяет свободно отступать от Правил, видоизменять их в конкретных сделках. [c.293]
Смотреть страницы где упоминается термин Методы оценки качества эксперта
: [c.93] [c.284] [c.340] [c.192] [c.393] [c.558]Смотреть главы в:
Теория и практика экспертной оценки товаров и услуг -> Методы оценки качества эксперта