Kafe-sviaz.ru

Финансовый журнал
9 просмотров
Рейтинг статьи
1 звезда2 звезды3 звезды4 звезды5 звезд
Загрузка...

Анализ экспертных оценок

Анализ результатов (обработка экспертных оценок)

Основные этапы обработки экспертных оценок:

· определение компетенции экспертов;

· определение обобщенной оценки;

· построение обобщенной ранжировки объектов в случае нескольких оцениваемых объектов или альтернатив);

· определение зависимостей между ранжировками;

· оценка согласованности мнений экспертов. При отсутствии значимой согласованности экспертов необходимо выявить причины несогласованности (наличие групп) и признать отсутствие согласованного мнения (ничтожные результаты);

· оценка ошибки исследования;

· построение модели свойств объекта (объектов) на основе ответов экспертов (для аналитической экспертизы);

· подготовка отчёта (с указанием цели исследования, состав экспертов, полученная оценка и анализа результатов).


26. Подбор экспертов и их опрос.

Часто предлагают использовать методы взаимооценки и самооценки компетентности экспертов. С одной стороны, кто лучше может знать возможности эксперта, чем он сам? С другой стороны, при самооценке компетентности скорее оценивается степень самоуверенности эксперта, чем его реальная компетентность. Тем более, что само понятие «компетентность» строго не определено. Можно его уточнять, выделяя составляющие, но при этом усложняется предварительная часть деятельности экспертной комиссии.

При использовании метода взаимооценки, помимо возможности проявления личностных и групповых симпатий и антипатий, играет роль неосведомленность экспертов о возможностях друг друга. В современных условиях достаточно хорошее знакомство с работами и возможностями друг друга может быть лишь у специалистов, много лет работающих совместно. Однако привлечение таких пар специалистов не очень-то целесообразно, поскольку они слишком похожи друг на друга.

Использование формальных показателей (должность, ученые степень и звание, стаж, число публикаций. ), очевидно, может носить вспомогательный характер. Успешность участия в предыдущих экспертизах — хороший критерий для деятельности дегустатора, врача, судьи в спортивных соревнованиях, т.е. таких экспертов, которые участвуют в длинных сериях однотипных экспертиз. Однако, увы, наиболее интересны и важны уникальные экспертизы больших проектов, не имеющих аналогов.

В случае, если процедура экспертного опроса предполагает совместную работу экспертов, большое значение имеют их личностные качества. Один «говорун» может парализовать деятельность всей комиссии. В подобных случаях важно соблюдение регламента работы, разработанного РГ.

Есть полезный метод «снежного кома» [10], при котором от каждого специалиста, привлекаемого в качестве эксперта, получают несколько фамилий тех, кто может быть экспертом по рассматриваемой тематике. Очевидно, некоторые из этих фамилий встречались ранее в деятельности РГ, а некоторые — новые. Процесс расширения списка останавливается, когда новые фамилии перестают встречаться. В результате получается достаточно обширный список возможных экспертов. Ясно, что если на первом этапе все эксперты были из одного «клана», то и метод «снежного кома» даст, скорее всего, лиц из этого «клана», мнения и аргументы других «кланов» будут упущены.

Необходимо подчеркнуть, что подбор экспертов в конечном счете — функция Рабочей группы, и никакие методики подбора не снимают с нее ответственности. Другими словами, именно на Рабочей группе лежит ответственность за компетентность экспертов, за их принципиальную способность решить поставленную задачу. Важным является требование к ЛПР об утверждении списка экспертов.

Существует ряд нормативных документов, регулирующих деятельность экспертных комиссий в тех или иных областях. Примером является Закон Российской Федерации «Об экологической экспертизе» от 23 ноября 1995 г. , в котором регламентируется процедура экспертизы «намечаемой хозяйственной или иной деятельности» с целью выявления возможного вреда, который может нанести рассматриваемая деятельность окружающей природной среде.


27. Обработка информации, получаемой от экспертов, проверка ее согласованности и достоверности.

Экспертными оценками называют методы общей группы методов научного исследования, используемых для оценивания сложных систем на качественном уровне.

При использовании экспертных оценок обычно предполагается, что мнение группы экспертов надежнее, чем мнение отдельного эксперта. В некоторых теоретических исследованиях отмечается, что это предположение не является очевидным, но одновременно утверждается, что при соблюдении определенных требований в большинстве случаев групповые оценки надежнее индивидуальных. Поэтому важно при организации экспертных опросов вводить определенные правила и использовать соответствующие методы получения и обработки экспертных оценок.

Алгоритм организации экспертных опросов включает этапы, на которых рассматриваются следующие вопросы:

· проблемы формирования экспертных групп, включая требования к экспертам, размеры группы, вопросы тренировки экспертов, оценки их компетентности;

· формы экспертного опроса (разного рода анкетирования, интервью, смешанные формы опроса) и методики организации опроса (в том числе методики анкетирования, мозговая атака, деловые игры и т. п.);

· подходы к оцениванию (ранжирование, нормирование, различные виды упорядочения, в том числе методы предпочтений, парных сравнений и др.);

· методы обработки экспертных оценок;

· способы определения согласованности мнений экспертов, достоверности экспертных оценок (в том числе статистические методы оценки дисперсии, вероятности для заданного диапазона изменений оценок, ранговой корреляции Кендалла, Спирмена, коэффициента конкордации и т. п.) и методы повышения согласованности оценок путем соответствующих способов обработки результатов экспертного опроса;

· варианты интерпретации полученных результатов.

Целесообразность применения того или иного метода определяется характером анализируемой проблемы, используемой информации.

Если оправданы лишь качественные оценки объектов по тем или иным качественным признакам, то используются методы ранжирования, парного и множественного сравнения. Если характер анализируемой информации таков, что целесообразно получить численные оценки объектов, то можно использовать тот или иной метод, начиная от непосредственных численных оценок с использованием шкал и кончая более тонкими методами последовательного сравнения, например, Черчмена-Акоффа.

В процессе экспертиз могут возникать погрешности – смещения оценок, вносимые самой процедурой сбора и анализа мнений экспертов. Поэтому специалисты в области экспертных методов большое внимание уделяют разработке надежных правил подготовки и проведения экспертиз. Ниже рассмотрены наиболее существенные правила и этапы проведения экспертиз.

Для подготовки экспертизы должна быть сформирована группа специалистов-организаторов. Эта группа призвана обеспечить условия для эффективной деятельности экспертов, разработать процедуру экспертизы, наиболее соответствующую характеру рассматриваемой проблемы. В задачи группы входит:

· Постановка проблемы, определение целей и задач экспертизы, ее границ, основных этапов;

· Разработка процедуры экспертизы;

· Отбор экспертов, проверка их компетентности и формирование групп экспертов:

· Проведение опроса и согласование оценок;

· Формализация полученной информации, ее обработка, анализ и интерпретация.

Численность группы экспертов не должна быть малой, так как в этом случае будет потерян смысл формирования экспертных оценок. Кроме того, на групповые оценки в значительной степени влияла бы оценка каждого эксперта. В то же время при очень большом количестве экспертов оценка каждого из них почти не влияет на групповую оценку. Рост численности экспертной группы не всегда повышает достоверность оценок, потому что зачастую расширение группы экспертов возможно лишь за счет привлечения малоквалифицированных специалистов. С ростом числа экспертов, кроме того, увеличиваются трудности, связанные с обработкой результатов опроса и координацией работы группы.

Перед экспертным опросом должны быть разработаны правила его проведения и организации, содержащие ряд положений, обязательных для всех экспертов. Эти правила должны обеспечивать соблюдение условий, благоприятствующих формированию экспертами объективного мнения. К таким условиям относятся:

Читать еще:  Какая технология предусматривает анализ проблемных ситуаций

· Независимость формирования экспертами собственного мнения об оцениваемых событиях;

· Сохранение анонимности ответов;

· Возможность проведения коллективных обсуждений оцениваемых событий;

· Предоставление экспертам требуемой информации.

В зависимости от важности и сложности проблемы и соответственно задач, возлагаемых на группу организаторов, в ее состав включают до пяти – семи человек – специалистов в данной области (областях) знаний, а также специалистов по экспертным методам (социологов, психологов, математиков).

Подготовку экспертизы начинают с постановки проблемы. Для этого, прежде всего, знакомятся с предысторией и состоянием проблемы, устанавливают ее место и значение. После этого проводится предварительный анализ проблемы, уточняются все внешние и внутренние связи, определяются границы включаемого в рассмотрение материала. Для этого организаторы экспертизы выдвигают центральный вопрос, составляющий существо проблемы, а затем «расщепляют» его на подвопросы, при этом ограничивают «поле» рассмотрения лишь теми подвопросами, без ответов на которые нельзя получить ответ на центральный вопрос.

При решении сложных социально-экономических и научно-технических проблем эксперты, представляющие разные отрасли знаний, обращаются к понятиям разных дисциплин. Поэтому необходимо сформулировать основные понятия,. используемые при проведении экспертизы.

В зависимости от целей и задач экспертизы, от подбора участвующих в ней специалистов организаторы экспертизы выбирают метод опроса: индивидуальный или групповой (коллективный), личный (очный) или заочный, устный или письменный.

Независимо от того, идет ли речь об анкете или интервью, в основе опроса лежит вопросник, с помощью которого и осуществляется сбор требуемой информации. Перевод цели и задачи экспертизы на язык вопросов требует от организаторов экспертизы сложной и кропотливой работы, знания различных типов вопросов, умения точно сформулировать их, расположить в определенной последовательности.

Анкета – это структурно организованный набор вопросов, каждый из которых логически связан с центральной задачей экспертизы. Все вопросы анкеты в зависимости от их содержания можно подразделить на три группы: данные о самом эксперте (его возрасте, должности, стаже работы, образовании, научном звании, узкой специализации и т.п.); вопросы по существу исследуемой проблемы; вопросы, позволяющие оценить мотивы, которых придерживался эксперт в своем анализе.

По форме различают вопросы открытые, закрытые и полузакрытые; прямые и косвенные. Вопрос считается открытым (свободным), если ответ на него может быть дан в любой форме и ничем не регламентирован, закрытым – если в его формулировке содержатся варианты возможных ответов, а эксперт должен выбрать один или несколько; полузакрытым, если перечнем предусмотрена возможность любых дополнительных замечаний.

Различают три вида вопросов, по которым дается экспертная оценка, — вопросы, ответы на которые содержат количественную оценку (1), требующие содержательного ответа в сжатой (2) и развернутой (3) форме.

Работа по отбору экспертов, участвующих в экспертизе, обычно начинается с составления списка компетентных в исследуемой области лиц. Этот список служит основой для выбора экспертов с помощью специальных методов оценки их качеств. Различаются четыре основные группы таких методов: самооценки; оценки группой каждого специалиста; оценка на основе результатов прошлой деятельности эксперта; методы оценки компетентности кандидатов в эксперты.

Экспертная оценка

Экспертная оценка (methods for expert evaluation) – это метод поиска и результат применения метода, полученный на основании использования персонального мнения эксперта или коллективного мнения группы экспертов.

Эксперт – компетентное для выработки оценки лицо, имеющее специальный опыт в конкретной области и участвующее в исследовании в качестве источника получения информации. Очевидно, в качестве экспертов необходимо использовать тех людей, чьи суждения помогут принятию адекватного решения. При подборе экспертов следует учитывать опасность личной заинтересованности в том или ином решении, который может стать существенным препятствием для получения объективного решения.

Методы экспертных оценок – это методы организации работы со специалистами-экспертами и обработки мнений экспертов.

Сущность методов экспертных оценок заключается в том, что в основу принятого решения, прогноза, вывода закладывается мнение специалиста или коллектива специалистов, основанное на их знаниях и практическом профессиональном опыте. В первую очередь, экспертной достойна называться только та оценка, которая придерживается правил объективности и честности.

Методы получения экспертной оценки:

  • на основе коллективной работы экспертной группы, когда итоговая оценка представляет собой коллективное мнение экспертов, полученное методом консенсуса – принятием решения на основе общего согласия без проведения голосования;
  • на основе индивидуального мнения членов экспертной группы, независимо друг от друга формулирующих оценку или на основании мнения лидера мнения.

Методы коллективной работы экспертной группы предполагают получение общего мнения в ходе совместного обсуждения решаемой проблемы.

  • мозговая атака (мозговой штурм) – выступление экспертов, на которые наложено одно ограничение – нельзя критиковать предложения других;
  • метод «635» – одна из разновидностей мозговой атаки. Цифры 6, 3, 5 обозначают шесть участников, каждый из которых должен записать три идеи в течение пяти минут. Лист ходит по кругу. Таким образом, за полчаса каждый запишет в свой актив 18 идей, а все вместе – 108;
  • деловая игра – метод, основанный на моделировании функционирования социальной системы управления при выполнении операций, направленных на достижение поставленной цели.
  • оценка комиссией – один из методов экспертных оценок, основанный на работе специальных комиссий. Группы экспертов за «круглым столом» обсуждают ту или иную проблему с целью согласования точек зрения и выработки единого мнения.
  • «суд» – метод, реализуемый по аналогии с ведением судебного процесса, когда в роли «подсудимых» выступают выбираемые варианты решения;

Методы получения индивидуального мнения членов экспертной группы основаны на предварительном получении информации от экспертов, опрашиваемых независимо друг от друга, с последующей обработкой полученных данных.

  • метод «Дельфи» – разработка программы последовательных многотуровых индивидуальных опросов;
  • метод интервью предполагает беседу с экспертом по схеме вопрос – ответ;
  • метод доклада предусматривает тщательную самостоятельную работу эксперта над анализом, с предоставлением мнения в виде аналитической записки.

Способы выработки как коллективных, так и персональных экспертных оценок:

  • оценка на основе ассоциаций – способ, основанный на изучении схожего по свойствам объекта с другим объектом;
  • оценка на основе по-парных (бинарных) сравнений – способ, основанный на сопоставлении экспертом альтернативных вариантов;
  • оценка на основе векторов предпочтений – способ, основанный на экспертном анализе и перебора всего набора альтернативных вариантов и определении наиболее предпочтительного.
  • оценка на основе фокальных объектов – способ, основанный на перенесении признаков случайно отобранных аналогов на исследуемый объект.
  • оценка на основе поиска средней точки – формулируются два альтернативных варианта решения. После этого эксперту необходимо подобрать третий альтернативный вариант, оценка которого расположена между значений первой и второй альтернативы.

Применимость метода экспертных оценок. Экспертные оценки применяются на любом этапе исследования: в определении цели и задачи самого исследования, в построении и проверке гипотез, при выявлении проблемных ситуаций, в ходе интерпретации какиех-либо процессов, событий или фактов, для обоснования адекватности используемого инструментария, в процессе выработки рекомендаций и т.д. Экспертные методы оценки применяют в ситуациях, когда выбор, обоснование и оценка решений не могут быть выполнены на основе точных расчетов.

Читать еще:  Метод анализа временных рядов

Анализ экспертных оценок

Существует множество процессов и явлений, количественная информация для характеристики которых отсутствует или очень быстро изменяется.

В этом случае используются методы экспертных оценок, сущность которых заключается в том, что в основу прогноза закладывается мнение специалиста, основанное на профессиональном, научном и практическом опыте.

Метод экспертных оценок применяется для сравнения каких-то параметров объектов (напр., комфортность самолета, сравнение автомобилей и др.), находящихся в одном «классе», одинаковой категории, и относится к разновидности мозгового штурма.

А, Б, В, Г, Д — это сравниваемые объекты (автомобили, самолеты, телефоны и т.д.)

Столбец «Параметр» — это, непосредственно, параметры, которые мы будем сравнивать для объектов.

Столбец «Вес» — вес параметра от 0,15 до 0,3 в зависимости от степени важности для нас.

Итак, как работает Метод экспертных оценок:

1. Выбираем объект для экспертной оценки;

2. Выбираем параметры для сравнения;

3. Определяем вес каждого параметра;

4. Задаем сравнительную шкалу;

Рассмотрим пример метода экспертных оценок:

1. Сравниваем самолеты Боинг, Туполев, аэробус, бомбардир, альбатрос .

2. Выбираем параметры сравнения.

Параметров желательно выбирать не менее 4 и не более 7, т.к. большее количество параметров влечет расфокусировку и отсутствие четкого понимания результата. То же самое и с количеством сравниваемых объектов — от 4 до 7.

3. Далее распределяем «Вес» между параметрами таким образом, чтобы в сумме он был равен 1. Наиболее приоритетным параметрам мы выделяем большее значение. причем каждый параметр варьируется в диапазоне от 0,015 до 0.3.

4. Задаем описательную сравнительную часть для объектов (самолетов):

Объекты сравнения по параметру «Максимальная дальность» сравниваются по 10-тибальной шкале. Максимальное значение 10 баллов присваивается, если (возможные варианты):

а) самолет пролетает без дозаправки более 5 000 км
б) самолет с дозаправкой пролетает более 10 000 км
в) если данный класс самолета имеет максимальную дальность беспосадочного перелета в своем классе.

При уменьшении расстояния перелета по данным параметрам на каждые 500 км снимается 1 балл.

Параметр «Стоимость эксплуатации» (в нашем случае это самый важный параметр, т.к. ему присвоен максимальный вес):

Самолету присваивается 10 баллов, если (возможные варианты):

а) стоимость эксплуатации самолета за квартал не более 100 000 долларов
б) стоимость эксплуатации не превышает 10 % от номинальной стоимости самолета

И так далее по всем параметрам.

В итоге наша таблица выглядит следующим образом:

Далее необходимо наши баллы умножить на вес данного параметра. В последний столбец «Е» ставится максимальное значение получившихся чисел. В строке «Сумма» складываем сумму «весов» параметров для каждого самолета.

5. Таким образом, самолет «В» оказался самым эффективным. Далее мы уже анализируем, надо ли нам покупать самолет В, оказавшийся самым эффективным, либо , например, склониться в сторону самолета Г с самыми маленькими эксплуатационными расходами, так как именно этот параметр ключевой.


Точки экспертности
следующие:

1. Какие выбираем параметры
2. Как взвешиваем
3. Как задаем характеристики описания

Обычно метод экспертных оценок используется экспертной группой, состоящей из нескольких человек. Первый эксперт независимо от других сравнивает объект А по всем 5-ти критериям. Второй эксперт оценивает объект Б и т.д. Либо возможен вариант, когда один эксперт оценивает все самолеты по одному критерию, второй эксперт оценивает все самолеты по второму параметру и т.д. Затем данные сводят в единую таблицу и подводят итоги.

В статье использовались материалы следующего видео:

74 + видео материалов от лучших бизнес тренеров России вы сможете найти на сайте wikimba.ru

Присоединяйтесь к нам!

Скачивайте бесплатные приложения для прогнозирования и бизнес-анализа:

  • Novo Forecast Lite — автоматический расчет прогноза в Excel .
  • 4analytics — ABC-XYZ-анализ и анализ выбросов в Excel.
  • Qlik Sense Desktop и QlikView Personal Edition — BI-системы для анализа и визуализации данных.

Тестируйте возможности платных решений:

  • Novo Forecast PRO — прогнозирование в Excel для больших массивов данных.

Получите 10 рекомендаций по повышению точности прогнозов до 90% и выше.

Оценка экспертная: особенности, методы проведения и результат

Оценка экспертная – это название целой системы диагностических методов, которые чрезвычайно широко применяются в менеджменте, экономическом анализе, психологии, маркетинге и других сферах. Эти методы позволяют охарактеризовать, классифицировать, присвоить определенный ранг или оценку событиям и понятиям, которые не поддаются количественному измерению.

В каких случаях необходима экспертная оценка

В ходе какого-либо исследования на любом из его этапов может быть применен метод экспертной оценки. В управленческой деятельности он может пригодиться:

  • На стадии определения целей и задач исследовательского процесса.
  • Во время построения или проверки гипотезы.
  • Для разъяснения проблемной ситуации. Для интерпретации происходящих процессов и событий.
  • Чтобы обосновать адекватность применяемого инструментария.
  • Для генерации рекомендаций, а также для реализации многих других целей.

Проведение экспертной оценки оправдано в тех случаях, когда нельзя принять решение, основываясь на точных расчетах (для составления психологического портрета, рабочей характеристики, оценки экономической неопределенности и рисков).

Чаще всего применение таких оценок становится важным в ситуации выбора одного или нескольких вариантов из предложенного множества:

  • Запуск в серийное производство одного из разработанных вариантов продукции.
  • Подбор космонавтов из многочисленных претендентов.
  • Определение проекта научной работы, который будет профинансирован.
  • Выбор предприятия, которое получит экологический кредит.
  • Определение инвестиционного проекта для вложения финансовых средств.

Кто такие эксперты, и как они работают

Как следует из названия метода, экспертная оценка предполагает привлечение одного или нескольких специалистов-экспертов, компетентных для вынесения оценок лиц, а также обработку их мнения. Подбор экспертов осуществляют с учетом адекватности их суждений и опыта в данной области.

Оценка экспертная может быть выражена как количественно, так и качественно. Данные экспертных исследований нужны руководителям, менеджерам и сотрудникам управляющего звена как основание для принятия решений.

Разработка экспертной оценки чаще всего проводится путем создания рабочей группы, которая занимается организацией деятельности эксперта (или нескольких экспертов). Если приходится задействовать более одного человека, их объединяют в экспертную комиссию.

Сколько экспертов потребуется?

В зависимости от специфики задания и возможностей предприятия, для проведения экспертной оценки может быть приглашен один или несколько экспертов. При этом оценка экспертная называется индивидуальной или коллективной.

Индивидуальной становится оценка, которой преподаватель характеризует глубину знаний студента. Также к этому типу относят диагноз, поставленный одним врачом. Однако при спорных или сложных ситуациях (серьезное заболевание, постановка вопроса об отчислении учащегося), прибегают к коллективному решению вопроса. Здесь необходимы симпозиумы врачей и организация комиссии преподавателей.

Читать еще:  Методы анализа маркетинговой деятельности предприятия

Такой же алгоритм действует и в армии: чаще всего решение принимается командующим единолично, однако при необходимости собирают военный совет.

Последовательность процедуры оценивания

Последовательность формирования актуальной и объективной экспертной оценки представляет собой такие этапы:

  1. Проведение анализа ситуации, которую требуется исследовать.
  2. Подбор экспертов для проведения процедуры.
  3. Изучение существующих способов, с помощью которых будет выполнен замер экспертных оценок.
  4. Проведение самой процедуры оценивания.
  5. Сведение и анализ информации, полученной в ходе оценивания.

При этом может потребоваться выполнение проверки входных данных, на которых будет основана оценка экспертная. В некоторых случая рабочей группе приходится менять состав экспертной группы или прибегать к повторному замеру тех же вопросов (с целью сопоставить в дальнейшем полученную оценку с объективными данными из других источников).

Ход оценивания: характеристика этапов

Большое значение для успешного проведения процедуры имеет компетентное решение организационных вопросов:

  • Планирование затрат на мероприятие (оплата услуг экспертов и специалистов по анализу полученных данных, расходы на аренду помещения, покупка канцтоваров).
  • Подготовка необходимых материалов (составление и распечатка бланков, обеспечение инвентарем).
  • Выбор и инструктаж модератора мероприятия.

В процессе работы эксперты должны руководствоваться выделенным регламентом, так как дополнительное время на принятие решения не влияет на его точность.

Когда будут получены ответы всех специалистов, выполняется оценка экспертного заключения. При этом учитывается степень согласованности всех мнений. Если однозначного согласия нет, рабочая группа должна выяснить причину разногласий, зафиксировать образование нескольких групп мнений и отсутствие согласованности как результат экспертной оценки. Затем оценивается ошибка исследования и выполняется построение модели на основании тех данных, которые были получены. Это необходимо, чтобы впоследствии можно было провести аналитическую экспертизу.

Методы, применяемые для проведения индивидуальной экспертной оценки: что такое интервью

Среди самых действенных и часто применяемых методик можно назвать:

  • Аналитический способ.
  • Метод написания сценария.
  • Интервью.

В согласии с методикой проведения интервью, прогнозист беседует с экспертом, задавая ему вопросы. Предметом разговора становятся перспективы развития объекта или явления, о котором идет речь. Программа опросника разрабатывается заранее.

Эффективность и качество экспертной оценки напрямую зависят от того, сможет ли эксперт в условиях ограниченного времени предоставить заключение.

Проведение экспертизы аналитическим методом

Выбирая аналитический метод для осуществления оценки, специалист-эксперт должен подготовиться к тщательному выполнению самостоятельной работы. Ему предстоит анализировать тенденции, оценивать состояние и возможные пути развития объекта, по отношению к которому применяется прогнозирование.

Система экспертных оценок предусматривает изучение всей информации об объекте, которая доступна эксперту. Результат оформляется как докладная записка.

Основным преимуществом аналитического метода становится то, что специалист может проявить все свои индивидуальные способности.

Осуществление экспертизы путем написания сценариев

Строго говоря, этот метод не должен быть отнесен только к категории индивидуальных способов оценивания, так как он с успехом применяется для работы в группе.

Чтобы использовать этот метод, эксперту следует определить логику изучаемых процессов и явлений относительно времени и разных комбинаций условий. Затем он сможет установить предположительную последовательность событий (их развитие, переход от ситуации в данный момент к прогнозируемому состоянию). Сценарий отражает все ступени решения задачи, а также предусматривает возникновение возможных препятствий.

Коллективная экспертиза: метод «мозгового штурма»

Для оценки сложных, масштабных, многоуровневых систем не обойтись без привлечения нескольких специалистов-экспертов.

Порученное задание они могут выполнить, применяя один из методов:

  • Коллективную генерацию идей («мозговая атака»).
  • Метод «635».
  • Метод Дельфи.
  • Оценку комиссий.

Благодаря коллективным усилиям и особенной организации, эксперты могут эффективно провести самые сложные процедуры, такие как экспертная оценка рисков для инвестиционного проекта или прогнозирование деятельности различных систем.

«Мозговой штурм» позволяет в полной мере раскрыть творческие данные экспертов. На первом этапе специалисты активно генерируют идеи, затем применяют деструктурирование (подвергают их критике, разрушают), выдвигают контридеи и вырабатывают согласованную точку зрения.

Главным условием становится отсутствие критики вначале и высказывание всех спонтанно возникающих идей.

Специфика метода «635»

Такое название метод получил из-за приема, который применяют эксперты при его использовании: каждый из шести экспертов записывает на листе бумаги три спонтанно возникших идеи за период, равный пяти минутам.

Далее лист переходит к следующему участнику. Продолжительность процедуры – полчаса. Таким образом, будет записано 108 предложений.

В чем особенность метода Дельфи

Целью разработки этого способа экспертного оценивания стала необходимость в более строгой и обоснованной процедуре, которая могла бы дать объективный и максимально полезный результат.

Его применяют эксперты, приглашенные в научные и технические институты, инвестиционные и страховые компании, а также в ряде других случаев.

Суть метода в том, что проводят многотуровые индивидуальные опросы (зачастую с помощью анкет). Затем выполняется компьютерный анализ экспертных оценок для формирования коллективного мнения. При этом выявляют и обобщают аргументы для защиты каждого суждения.

На следующем этапе полученные результаты передают экспертам для корректировок. Их несогласие с коллективным суждением должно быть письменно обосновано. В результате многократного возвращения оценки на корректировку рабочая группа добивается сужения диапазона и выработки согласованного суждения, касающегося перспектив развития исследуемого объекта.

Чем хорош метод:

  1. Эксперты, принимающие участие в оценке, не знают друг друга и не общаются. Таким образом, исключено их взаимодействие.
  2. Результаты предыдущих туров также представляют интерес и ценность для рабочей группы.
  3. Представляется возможность получения статистической характеристики группового мнения.

Несмотря на относительно высокую затратность и продолжительность, этот метод становится лучшим способом предопределения развития долгосрочных ситуаций проблемного характера.

Нередко оценка выполняется специально организованной комиссией (метод комиссий), которые за «круглым столом» рассматривают все аспекты проблемы и принимают согласованное решение. Недостатком становится влияние участников друг на друга и искажение результатов. Примером может служить экспертная оценка деятельности преподавателей и врачей.

Другие методы

Выше были перечислены самые распространенные методы выполнения экспертизы, но в практике производственных, научных и исследовательских организаций применяются и другие.

В зависимости от специфики ситуации, которую требуется спрогнозировать, а также от ресурсов и возможностей предприятия, могут быть применены:

  • Деловая игра. Она позволяет смоделировать необходимое количество ситуаций для изучения особенностей системы управления или других процессов.
  • «Суд» — инсценировка судебного процесса, при котором некоторые эксперты защищают варианты решений, другие пытаются их опровергнуть.
  • Метод доклада – после проведения анализа, эксперт выражает свое мнение в виде аналитической записки или доклада. Это актуально при необходимости проведения относительно несложной работы (например, экспертная оценка автомобиля для страхования, налогообложения или возмещения ущерба).

В качестве итога можно отметить, что существование большого количества методов и способов проведения экспертной оценки позволяет руководителю предприятия и рабочей группе выбрать наиболее эффективный вариант для решения конкретной проблемы.

Ссылка на основную публикацию
Adblock
detector