Использование экспертных методов принятии решений. Экспертные методы при принятии решений. Основные идеи методов экспертных оценок

В сложных ситуациях выбора лицо, принимающее решение (ЛПР), может не обладать всей необходимой информацией или опытом, что повышает степень риска принятия ошибочного решения. Кроме того, многие проблемы, требующие решения, полностью или частично не поддаются количественному анализу, и, следовательно, не дают возможности использовать методы моделирования. В подобных случаях значительный эффект приносят экспертные технологии.

Применение экспертных технологий в процессе принятия решений целесообразно, в основном, в следующих случаях:

    Определение целей . При разработке наиболее важных, стратегических решений очень важно точно определить и сформулировать цели, к достижению которых стремится ЛПР. Для сложных ситуаций разработан и применяется метод «дерева целей», позволяющий определить иерархическую структуру системы целей.

    Экспертный прогноз . При принятии решений довольно часто возникает необходимость определения и оценки тенденции ожидаемого развития ситуации, а также результатов реализации рассматриваемых альтернатив.

    Разработка сценариев развития ситуации . При разработке решения необходимо выявить основные факторы, под влиянием которых находится ситуация, и определить динамику их возможного изменения.

    Генерирование альтернатив. В случае возникновения новой, ранее не встречавшейся проблемы, не существует и готовых вариантов ее решения. Их еще необходимо найти и сформулировать.

    Формирование оценочных систем . Для сравнительной оценки альтернативных вариантов решения, а также для оценки степени достижения поставленной цели необходима оценочная система, в состав которой входят:

    критерии, характеризующие объект оценки;

    шкала для измерения каждого критерия;

    правила выбора наиболее предпочтительных альтернатив.

    Принятие коллективных решений . Открытое обсуждение альтернативных вариантов решения с учетом результатов экспертизы, согласование различных точек зрения, поиск компромисса и т.п.

Сущность экспертных методов принятия решений заключается в получении ответов специалистов на поставленные перед ними вопросы. Информация, полученная от экспертов, в целях минимизации погрешностей и влияния субъективного фактора обрабатывается с помощью специальных логических и математических процедур и преобразуется в форму, удобную для выбора решения.

Для подготовки и проведения экспертизы формируется организационная группа, обеспечивающая условия для эффективной работы экспертов. В зависимости от процедуры и способов организации и проведения экспертизы среди методов экспертных оценок различают следующие методы группового опроса.

Метод комиссий.

Предполагает регулярные собрания экспертов для проведения групповых дискуссий по обсуждаемой проблеме и выработки в ходе таких дискуссий согласованного решения. Этот метод при умелом использовании способствует созданию творческой обстановки в группе экспертов и разработке альтернатив решения. Однако метод комиссий обладает и недостатками. К их числу, прежде всего, относится отсутствие анонимности. Другой существенный негативный фактор - различная активность экспертов, не всегда связанная с их компетентностью.

Метод мозгового штурма (коллективной генерации идей).

Этот метод применяется, как правило, в тех случаях, когда решается новая, малоизученная проблема, или требуется найти новое, нетривиальное решение. Отличительная особенность метода мозгового штурма заключается в том, что он запрещает критику предлагаемых альтернатив в процессе их выдвижения, что обеспечивает наиболее полное выявление и использование творческого потенциала экспертов и возможность свободного высказывания и появления самых «безумных» идей.

Чем больше количество и разнообразие мнений и предложений, тем лучше, т.к. шире охват проблемы и больше вероятность появления ценной идеи.

В настоящее время одним из наиболее распространенных методов коллективной экспертной оценки является метод Дельфи.

Метод Дельфи. Достоинство данного метода состоит в том, что он позволяет обобщать индивидуальные мнения отдельных экспертов в согласованное групповое мнение. Метод Дельфи характеризуют три специфические особенности:

анонимность экспертов;

регулируемая обратная связь;

статистическая обработка результатов опроса и формирование группового ответа.

Анонимность экспертов заключается в том, что в ходе проведения экспертизы участники экспертной группы неизвестны друг другу и их взаимодействие в процессе опроса полностью исключено. Это достигается использованием специальных анкет, а также другими способами индивидуального опроса, например, в режиме диалога с компьютером.

Регулируемая обратная связь обеспечивается проведением нескольких туров опроса, результаты которых сообщаются экспертам.

Статистическая характеристика группового ответа заключается в том, что группа экспертов рекомендует вариант решения, опирающийся на мнение большинства, т.е. такую альтернативу, которую выбрало бы большинство членов группы.

Метод сценариев .

Суть этого метода - написание экспертами сценариев развития анализируемой ситуации с целью определить тенденции возможного развития и сформировать картину состояний, к которым она может прийти под влиянием тех или иных факторов, в том числе под воздействием определенных управленческих решений или при их отсутствии. Данный метод широко используется для разработки стратегических решений в различных сферах деятельности: политике, военном деле, экономике и реализуется в двух основных модификациях:

метод получения согласованного мнения - несколько независимых групп экспертов разрабатывают сценарии возможного развития событий, а затем, с помощью процедуры, используемой в методе Дельфи, вырабатывают согласованный сценарий;

Процесс прогнозирования обычно заканчивается составлением итогового документа, в котором содержатся:

цели и задачи прогноза;

краткое описание объекта прогнозирования, гипотеза о механизме его функционирования и развития, принятая система допущений и ограничений;

подробное описание разработанных сценариев и соответствующих им тенденций развития с указанием возможных в будущем проблемных ситуаций;

Метод суда.

Этот метод основан на использовании процедуры судебного заседания. При этом одна часть экспертов - сторонники обсуждаемой альтернативы решения - выступают в качестве «защиты», приводя всевозможные доводы в ее пользу, другая - противники - в качестве «обвинения», приводя аргументы против, а третья часть экспертов - «жюри» - выступают в качестве присяжных, оценивая обоснованность аргументов и вынося окончательное решение.

Экспертные оценки (даже с учетом процедуры их согласования и статистической обработки) носят, в значительной мере, субъективный характер, поэтому при использовании подобных методов возникает весьма важный вопрос: кого считать экспертом и как выбрать «хорошего» эксперта, или, другими словами, как оценить качества эксперта?

Экспертные методы основаны на совокупном мнении специалистов, обычно в пересекающихся областях деятельности, например, в социологии, психологии, РУР. Они относятся к субъективным методам. Субъективное не всегда синоним неправильного или неэффективного.
К основным условиям применения экспертных методов относятся:
в состав экспертной комиссии должны входить общепризнанные специалисты в соответствующей области РУР;
решения, принимаемые членами экспертной комиссии, должны быть безусловными для участников, представляющих на оценку свои варианты решений;
области применения экспертных методов должны давать участникам преимущества перед другими.
Экспертные методы применяются преимущественно в социальной и биологической системах, например при
консилиумах, на конкурсах, дегустациях и т. п. Существуют четыре основных направления экспертных методов: простой ранжировки (метод предпочтения), задания весовых коэффициентов, последовательных сравнений и парных сравнений.
Метод простой ранжировки основан на том, что каждый эксперт располагает набором признаков, например время реализации, финансовые затраты, повышение объема сбыта, величина дополнительной прибыли, качество продукции. Данные признаки располагают для каждого решения в порядке предпочтения. Цифрой 1 обозначается наиболее важный признак, цифрой 2 - следующий за ним по важности и т. д. Полученные данные сводятся в таблицу и обрабатываются либо вручную, либо с помощью методов математической статистики.
Метод последовательных сравнений (сортировки).
В состав метода входят следующие операции:
Составляется перечень признаков решений.
Перечень записывается в таблицу в порядке убывания значимости.
По каждому признаку в таблицу записывается оценка реализации каждого признака по всем решениям - максимальная оценка 5.
По каждому столбцу находится сумма произведений оценки на соответствующий коэффициент значимости признака.
Производят сортировку полученных значений по максимальному значению суммы и определяют предпочтительный вариант решения.
Метод парных сравнений (парная сортировка). Метод реализуется путем парных сравнений признаков каждого УР и дальнейшей статистической обработкой УР. Для осуществления парных сравнений решения записываются подряд в любом порядке. Затем эксперты сравнивают два первых УР, лучшее из них сравнивается с третьим УР и т.д. В результате парных сравнений выбирается одно лучшее УР.
Эвристические методы основаны на логике, здравом смысле и опыте при РУР, при которых выявляется новая существенная информация. Они используют метод Сократа - извлекать скрытую в человеке информацию с помощью искусных наводящих вопросов. Методы применяются при недоступности или отсутствии условий для использования формализованных методов РУР. Основу эвристических методов составляет метод индукции, т. е. переход от частного к общему. При этом проблема разделяется на несколько относительно простых подпроблем. Для каждой подпроблемы формируются набор задач и набор соответствующих решений. Считается, что при успешном выполнении всех решений проблема будет разрешена в целом. Данные методы практически целиком относятся к искусству в управленческой деятельности. Эти методы эффективны, если руководитель смог так разделить проблему, что получившиеся подпроблемы являются типовыми (штатными) для конкретной организации и имеется типовая методика их реализации.
Разработка управленческих решений для нетиповых, обычно творческих задач - довольно трудное занятие. В управленческой практике таких задач встречается довольно много. Это связано с новыми условиями, в которые попадает человек или коллектив в производственной деятельности. Обычно такие задачи решаются постепенно путем обсуждения, концентрации идей, развития новых подходов и стимулирования мышления. Неслучайно собрания, заседания, летучки, планерки и другие формы проведения обсуждения новых проблем и разработки решений прочно вошли в практику работы руководителей. На подобных мероприятиях руководители и специалисты принимают такие эффективные решения, которые не под силу одному даже очень умному человеку. Подавляющее большинство открытий и изобретений сделано при коллективном обсуждении или с их подачи, а известные слова: «эврика» и«эвристика» дали название этим методам.
Собрания и совещания можно проводить двумя способами: без подготовки и с подготовкой. Без подготовки такие мероприятия малоэффективны и не дают удовлетворения их участникам. Часто работники с большой неохотой идут на собрания и совещания. Известен закон Паркинсона о том, что эффективность совещания обратно пропорциональна затраченному времени и количеству приглашенных людей. Подготовленные собрания основаны на различных методах, в
том числе и на эвристических. Эвристика состоит в последовательном выделении целей и ситуации, а также в уменьшении их различий.
Характерные наборы приемов эвристических методов. Набор 1: Обобщение задачи. Конкретизация задачи. Формулирование обратной задачи. Включение в другую структуру. Критика очевидных решений. Поиск привнесенных условий. Движение от конца к началу. Сближение данных и цели. Перекодирование текста в модель. Использование сходных задач. Анализ условий. Анализ конфликта. Выдвижение любых идей. Переструктурирование. Набор 2:
Включение в другую структуру. Выдвижение противоположных гипотез. Перерыв в решении нескольких задач. Вживание в образ явлений задачи. Регуляция уровня уверенности в себе. Движение от общих целей к частным. Символическая запись условий. Определение области поиска неизвестного. Включение в деятельность.
Введение дополнительных элементов или отношений. Деление задачи на части. Выделение доминирующих целей. Подведение под логические категории. Подведение под диалектические категории. Резонанс.
Замена терминов определениями. Данные приемы составляют три фазы разработки решения: анализ условий задачи, поиск решения, проверка решения. Метод сценариев. Типовой вид сценария. Метод сценариев представляет собой набор прогнозов по каждому рассматриваемому решению, его реализации, а также возможным положительным и отрицательным последствиям. Сценарии по каждому решению обычно фиксируются на бумаге, в памяти компьютера, на магнитной ленте. Они напоминают литературные сценарии с прологом, основной частью и эпилогом.
Сценарии всех спектаклей по сути также представляют прогнозы решений необычных или классических жизненных проблем, при этом зрители играют роль арбитров. Спектакли с плохими вариантами решений являются провальными и их обычно не спасает талантливая игра актеров.
Сценарий для УР. При разработке, выборе или реализации УР метод сценариев выполняется следующим образом:
руководитель подразделения составляет подробное описание задания: цели, существующую ситуацию и проблему;
одному из опытных работников поручается разработать варианты решения проблемы;
специалисту, обладающему еще и литературными способностями, дается задание составить сценарий возможного прохождения решения и предполагаемых результатов, а также реакций на эти результаты заинтересованных специалистов;
текст сценария рассылается всем работникам, которые на разных стадиях должны принять участие в разработке и реализации решения;
созывается совещание по обсуждению сценария. Возможны три варианта результатов обсуждения:
полное одобрение сценария и утверждение технологии разработки и реализации решения, внесение в него коррективов, утверждение технологии разработки и реализации решения, очевидное несогласие и переделка сценария;
составление окончательного сценария для ввода в базу данных компании.
Структура сценария состоит из содержательной части и количественных параметров. В состав содержательной части рекомендуется включать:
историю развития объекта управления;
ситуацию, приведшую к необходимости РУР, и исторические параллели решения аналогичных проблем;
цель, вытекающую из инициирующей ситуации;
действующих лиц внешней и внутренней для организации среды;
психологический конфликт между участниками внутренней и внешней среды;
перечень технических и социальных проблем исходя из цели;
решения по каждой проблеме;
возможные результаты.
Новаторские идеи, требующиеся для обеспечения достижения в реальной деятельности организации каждого из критериев, обеспечиваются чаще всего через использование менеджером принципа «мозговой атаки» или какой-либо другой формы группового творчества или экспертного метода принятия управленческих решений. Принцип «мозговой атаки» -
форма коллективного творчества по поиску эффективного решения для разрешения конкретной проблемы. Обычно такой принцип реализуется через организацию менеджером совещания с подчиненными, в ходе которого менеджер обрисовывает характер возникшей проблемы, описывает желательный результат ее разрешения и просит выдвигать идеи, использование которых может обеспечить эффективное разрешение такой проблемы.
Участники такого совещания, т.е. процедуры «мозговой атаки», по очереди вслух выдвигают (формулируют) возможные идеи («Штурмуют проблему», а точнее - способ ее разрешения), которые тут же подвергают оценке другие участники совещания. Если цель не достигается, то такое мероприятие повторяется через определенное время, которое используется участниками такой группы для более глубокого осмысления проблемы и поиска возможных способов ее разрешения.
В конце концов менеджер составляет перечень (список) идей, использование каждой из которых обеспечивает достижение конкретного критерия. При наличии такого списка менеджер подвергает идеи оценке с точки зрения их совместимости. Его основная цель при этом заключается в недопущении наличия в таком списке взаимоисключающих идей. А такое возможно, поскольку решения по способу достижения каждого критерия принимались изолированно друг от друга, не в системе. Вместе с тем менеджер сопоставляет идеи, включенные в такой список, с точки зрения их взаимной поддержки, и они группируются именно на этой основе. Группировка же идей преследует цель сформулировать, разработать такую их комбинацию, которая могла бы быть оценена как эффективная и синергическая, т. е. как комбинация, совокупный эффект которой превышает простую сумму эффектов от идей, взятых по отдельности. В то же самое время принимаемое на основе такого метода управленческое решение должно отличаться еще и оптимальностью. Оптимальным же называют решение, обеспечивающее экстремум критерия или же обеспечивающее согласованность всех участников процедуры разработки и принятия решения.
Вместе с тем какой метод выбран для разработки и принятия решения, большую роль играет оценка качеств самого эксперта. Эксперт - это профессионал, знания и навыки которого лицо, принимающее решение (ЛПР) должно учитывать при разработке и принятии решения.
Эксперт должен быть высококвалифицированным специалистом в принятии решения. Но, естественно, не всегда может быть приглашен эксперт, так как проблема, по которой необходимо принять решение, ограничена во времени. И тогда в роли эксперта может оказаться менее квалифицированный человек.
В целом на формирование экспертной группы влияют:
конкретная ситуация принятия решения;
возможность организаторов экспертизы привлечь для работы квалифицированных специалистов.
возможность специалистов принять участие в работе экспертной комиссии.
В настоящее время не существует единой методики оценки экспертов. В реальной жизни ЛПР сам формирует мнение о профессиональном уровне специалиста. Таким образом при отсутствии опыта и возможности организации, эксперту необходимо обращаться к услугам независимых центров экспертизы, информационно-аналитичеких центров, консалтинговых фирм, которые непосредственно проводят анализ ситуации, оценку объектов экспертизы, подготовку и оценку альтернативных вариантов решений.
При оценке качеств эксперта необходимо учитывать его профессиональные знания, опыт деятельности и эффективность в составе других экспертных наименований. Существует три группы методов оценки качеств эксперта: априорные, апостериорные и тестовые. Априорными называются методы оценки качеств эксперта, при которых не используется информация о результатах его участия в предшествующих экспертизах. Апостериорными называются методы оценки качеств эксперта, основанные на информации на результатах его участия в предыдущих экспертизах. Тестовыми являются методы оценки качеств эксперта, предполагающие проведение испытания.
Априорные методы оценки эксперта. К таковым относятся методы самооценивания. Их суть в том, что эксперт сам дает оценку своих качеств.
Существуют следующие методы самооценивания:
самооценка по большой шкале;
самооценка с использованием вербально-числовых шкал, которые наряду с численными значениями содержит их качественные описание;
самооценка по вербальной шкале, при которой эксперт дает словесную оценку своим знаниям и опыту, используя для этого качественные значения заранее разработанной шкалы.
Нельзя сказать, что в данном случае эксперт дает себе объективную оценку - это достаточно спорный вопрос. С одной стороны никто, кроме самого эксперта, не представляет всю совокупность знаний и опыта, которыми он обладает. С другой, человек больше всего ошибается, когда дает себе оценку.
Также к данной группе относятся методы взаимной оценки, предполагающие оценивание экспертов друг другом. Самый популярный из них - метод списка экспертов. Он осуществляется следующим образом. Каждый эксперт составляет список компетентных экспертов. Затем рассчитывается коэффициент компетентности эксперта, т. е. отношение числа списков, в которых присутствует эксперт, к общему числу списков. К группе априорных методов относится документационный метод. Для оценки качеств эксперта предполагается использование объективных характеристик, имеющих документационное подтверждение (стаж работы, ученая степень, количество публикаций, наличие данных о повышении квалификации, должность и т.п.). Но данный метод объективен при применении его в комплексе с другими, так как по нему трудно получать участие эксперта в работе по конкретной ситуации.
Апостериорные методы оценки.
Данные методы предполагают использование результатов участия эксперта в предшествующих комиссиях. В случае использования данных методов выявляется компетентность экспертов. Для этого применяется метод парных сравнений. В данном случае эксперту предъявляются пары сравниваемых характеристик оценки и он выбирает наиболее предположительный на его взгляд. После того все характеристики оценки рассмотрены, можно сформулировать мнение о предпочтениях эксперта в отношении оцениваемых объектов. Противоречий не возникает - это говорит о компетентности
эксперта (первое противоречит второму, второе противоречит третьему, а третье противоречит первому - явные противоречия).
Также к данной группе относится метод оценки достоверности ситуации эксперта. В качестве критерия используется коэффициент достоверности - частота случаев, когда эксперт, приписывая наибольшую вероятность впоследствии подтвердившихся событий. В этом случае рассчитывается средний коэффициент достоверности, групповой коэффициент и сравнивается с коэффициент эксперта.
Тестовые методы оценки качеств эксперта.
Данные методы подразумевают выполнение испытуемых экспертом определенного задания.
Данные методы используются для определенных профессиональной пригодности специалистов в разных областях деятельности. Их достоинством кроме определения определенного профессионального уровня выявляются навыки и опыт эксперта. Для проведения тестовых экспертов выполнения следующих правил:
тест должен быть специально разработан под непосредственные объекты оценки;
правильные значения оцениваемых характеристик должны быть известны только аналитической группе, а не экспертам;
должна быть разработана шкала для определения точности оценок, даваемых экспертом;
вероятность случайного угадывания должна быть максимально мала.
Может проверить воспроизводимость экспертных оценок эксперта. Для этого необходимо провести несколько тестовых экспериментов, приблизить по максимуму к конкретной экспертизе. Интервал времени между экспериментами должен быть достаточным для того, чтобы эксперт мог забыть результат предыдущего эксперимента. После проведения всех тестовых экспериментов сравниваются данные. Более воспроизводимые оценки эксперта свидетельствуют о большой его профессиональной компетентности и пригодности в данной экспертной группе.
Способы получения экспертных оценок. Под оценкой экспертов понимают количественные и качественные измерения показателей. К методам получения количественных экспертных оценок относятся:
непосредственная количественная оценка, т. е. эксперт указывает числовое значение показателя для оцениваемого объекта (альтернативы стоимости квартиры, земельного участка и т.д.). Если невозможно указать конкретное значение, эксперт определяет где находится это значение.
метод средней точки. Этот метод подходит в случае когда альтернатив много. Эксперт оценивает наиболее предпочтительную альтернативу п(а1) и наименее предпочтительную п(а2). Затем он подбирает альтернативу (а3), оценка которого п(а3) расположена в центре между значениями п(а1) и п(а2). Затем экспертом определяется оценкой альтернативы (а4), а ее значения п(а4) - посередине п(а1) и п(а3).
Методы получения количественных экспертных оценок:
Экспертная классификация применима в случае, если необходимо определить принадлежность оцениваемых альтернатив к установленным и принятым категориям и т. п. Если классы уже установлены, то эксперту предъявляют альтернативные варианты и он определяет, к какому классу принадлежит данная альтернатива. Если не установлены, то эксперту предъявляют альтернативные варианты и просят определить, относятся они к одному классу или разным.
Ранжирование альтернатив. Суть его в упорядочивании сравниваемых альтернатив по степени предпочтительности определенного признака. Если альтернатив до 20, то эксперту указываются все и он определяет наиболее предпочтительную. Затем наиболее предпочтительную из оставшихся и так далее пока не будут проранжированы все альтернативы.
Метод экспертных кривых. Данный метод применяется, когда необходимо разработать прогноз на основе динамики изменения показателей, характеризующих объекты экспертизы, например темпов роста ВВП, инфляции, уровня безработицы и т.д.
Предполагается построение графика на основе статистических данных, отображающих тенденцию динамики анализирующего показателя. Затем пытаются переводить ситуацию в будущее. Недостаток - не учитывается возможность естественных изменений, которые могут привести к смене тенденций.
Рассмотренным выше группам соответствует два типа шкалы:
количественных измерений;
качественных измерений;
Абсолютная шкала:
если нужно определить число, являющееся результатом каких-либо операций и число однозначное и единственное, если нужно определить количество работников.
Шкала отношений, например, предмет может измеряться в различных системах единиц (вес в кг и футах). Но отношение масс двух предметов будет одинаково в разных измерениях.
Шкала интервалов: при переходе от одной системы к другой отношения числовых значений не сохраняется, но сохраняется разность интервалов (например, температура) получаются разные числа, так как в разных шкалах разные. Точки начала отсчета и разные единицы масштаба измерений.
Шкала разностей: если при переходе от одной числовой системы измерения к другой меняется точка отчета, то шкала называется шкалой разностей (например, Летоисчисление от Рождества Христова, и сотворение мира и т.д.).
Шкала качественных измерений: номинальная шкала - разбиение альтернатив на классы по определенному признаку. Всем альтернативам, попавшим в один класс, соответствует одно число (разбиение студентов на группы).
Порядковая шкала: используется для определения порядка предпочтения альтернатив (например, свойств личности человека, необходимых для одного задания срочность, например для быстрого вычисления).
Но на практике невозможно установить четкие границы между способами оценки экспертов, так как решение комплексных проблем современного менеджмента требует использование различных как методов и способов оценки экспертов, так и методов принятия решений.

Еще по теме 3.2. ЭКСПЕРТНЫЕ МЕТОДЫ ПРИНЯТИЯ УПРАВЛЕНЧЕСКИХ РЕШЕНИЙ:

  1. 4.3. Особенности построения систем поддержки и принятия управленческих решений
  2. 1.4. ТЕХНОЛОГИЯ ПРИНЯТИЯ УПРАВЛЕНЧЕСКИХ РЕШЕНИЙ В СИСТЕМЕ ФИНАНСОВОГО МЕНЕДЖМЕНТА
  3. 4.2. Аналитические системы и принятие управленческих решений
  4. 1.4. ЗНАЧЕНИЕ ЧЕЛОВЕЧЕСКОГО ФАКТОРА В ПРОЦЕССЕ РАЗРАБОТКИ И ПРИНЯТИЯ УПРАВЛЕНЧЕСКИХ РЕШЕНИЙ
  5. 3.1. РАЗЛИЧНЫЕ МЕТОДЫ И ПОДХОДЫ К ПРИНЯТИЮ УПРАВЛЕНЧЕСКИХ РЕШЕНИЙ
  6. Часть 1. Основы разработки и принятия управленческого решения
  7. Глава 4. Методология разработки и принятия управленческого решения в сложной экономической системе на основе математической модели
  8. Методология разработки и принятия управленческого решения в сложной экономической системе на основе математической модели

- Авторское право -

Сложность производственных систем, разнообразие и во многих слу­чаях неопределенный характер поступающей производственной инфор­мации придают задаче управления творческий характер, повышающий роль человеческого фактора. Это непосредственно проявляется в возрастающей юли в современном управлении методов экспертных оценок.

Сущность экспертных методов заключается в построении рациональ­ной процедуры интуитивно-логического мышления человека в сочетании с количественными методами обработки и анализа полученных результа­тов. При этом обобщенное мнение экспертов принимается как возможное решение проблемы.

Известны различные определения слова «эксперт» (от лат. expertus - опытный). Чаще всего под ним подразумевается высококвалифицирован­ный специалист. Формирование состава экспертной комиссии зависит от конкретной ситуации принятия решений, возможностей организаторов экспертизы привлечь для работы высококвалифицированных специалистов, возмож­ностей последних принять участие в работе экспертной комиссии.

Главными задачами экспертных оценок являются:

1. Определение целей. При принятии важных решений необходимо четко представлять цели, к достижению которых стремится ЛПР. Для сложных ситуаций рекомендуется применять дерево целей.

2. Экспертный прогноз. Особую роль при принятии решений игра­ют проблемы, связанные с оценкой будущего развития анализируемых ситуаций, ожидаемых результатов альтернативных вариантов решений. Экспертная информация содержит не только количественные, но и качественные оценки, поэтому может стать базой для прогнозов, и даже более реалистичной, чем тривиальная статистическая информация.

3. Сценарии ожидаемого развития ситуации. Наиболее часто для формирования сценария применяют метод мозговой атаки в сочетании со специальными приемами использования аналитической информации.

4. Генерирование альтернативных вариантов. Подобные процедуры могут предусматривать проведение экспертиз с использованием методов типа мозговой атаки, а также создание в сложных случаях автома­тизированных систем генерирования альтернативных вариантов.

6. Оценочные системы. Формируются при индивидуальных и коллективных сравнительных оценках объектов экспертизы для определения степени достижения цели. Большое внимание при этом уделяется оценке сравнительной важности критериев.

7. Принятие коллективных решений. Здесь проводится не только коллективная экспертиза, но и открытое обсуждение альтернативных вариантов решения, дополнительного обмена информацией между лица­ми, принимающими непосредственное участие в процессе принятия решений, согласования, поиска компромисса.

Различают экспертизы однотуровые и многотуровые, анонимные и предусматривающие открытый обмен мнениями, с обменом информа­цией в процессе проведения экспертизы и без него и т.д.

Процедуры организации и проведения экспертиз в настоящее время достаточно детально разработаны и подробно описаны в специальной литературе. Рассмотрим наиболее популярные методы экспертиз.

Метод комиссий - это открытая дискуссия по обсуждаемой проб­леме для выработки единого мнения экспертов. Коллективное мнение определяется в результате открытого или тайного голосования. В некото­рых случаях к голосованию не прибегают, выявляя результирующее мне­ние в процессе дискуссии. Преимущества метода комиссий: возможен рост информированности экспертов за счет обсуждения обоснования эксперт­ных оценок и обратная связь (под воздействием полученной информации эксперт может изменить первоначальную точку зрения). Однако метод комиссий обладает и недостатками. В частности, отсутствует анонимность, что может привести к появлению конформизма; дискуссия нередко при­нимает вид полемики наиболее авторитетных экспертов; различная актив­ность экспертов, часто не совпадающая с их компетентностью; публич­ность высказываний сочетается порой с нежеланием некоторых экспертов отступить от ранее высказанного мнения, хотя оно в ходе дискуссии может претерпеть изменения.

Экспертиза по методу суда характеризуется некоторой аналогией с судебным процессом. Состав экспертов делится на две группы. Одна объявляется сторонниками рассматриваемой альтернативы и выступает в качестве защиты. Другая объявляется ее противниками и пытается выявить отрицательные стороны. Возможно и третья «сила», которая регулирует ход экспертизы и выносит окончательное решение.

Метод прогнозного графа. Качество прогнозов зависит от корректно проведенной экспертизы и обработки ее результатов. Известным методом экспертиз сложных систем является метод прогнозного графа. Он включает несколько туров. На первом туре составляется предварительный список промежуточных целей, необходимых для достижения конечной цели. Эксперты указывают специалистов, способных оценить возможность реализации каждой из указанных ими промежуточных и конечной целей. На втором туре анализу подвергаются уже не конечная, а промежуточные цели, сформированные экспертами на первом туре. Последующие туры экспертизы аналогичны второму. Процедура заканчивается на том туре, когда более не требуется дополнительных анализов и детализации.

Метод простой ранжировки. Метод основан на том, что эксперт дает оценку каждому из критериев по каждой альтернативе. Например: время реализации, финансовые затраты, объем сбыта, прибыль, качество продукции. Эти признаки располагают для каждой альтернативы в порядке предпочтения. Цифрой 1 обозначается наиболее важный признак, цифрой 2 – следующий за ним по важности и т.д. полученные данные сводятся в таблицу и обрабатываются либо вручную, либо с помощью методов математической статистики. В качестве примера приведена таблица оценок признаков по четырем альтернативам (табл.3.11).

В таблице нет решения, соответствующего желательному распределению приоритетов признаков. Наиболее приемлемым считается решение № 2, у которого совпадают с желательным приоритеты по третьему и пятому признакам и имеются небольшие отклонения по остальным.

Таблица 3.11

Таблица оценок критериев по каждой альтернативе

Метод задания весовых коэффициентов . Метод заключается в том, что каждому критерию ставится в соответствие весовой коэффициент (коэффициент значимости). Используются два варианта формирования весовых коэффициентов:

· Сумма всех коэффициентов должна быть равна какому-нибудь целому числу, например, для шести признаков решения устанавливаются коэффициенты 0,3; 0,1; 0,2; 0,2; 0,1; 0,1 – в сумме это составляет 1;

· Для наиболее важного признака решения устанавливают предельный коэффициент (например, 8), все остальные коэффициенты равны долям этого числа (например, 1,2,4,6).

В состав метода входят следующие операции (см. пример в табл. 3.12):

1. Составляется перечень признаков решений

2. Перечень записывается в таблицу в порядке убывания значимости

3. По каждому перечню в таблицу записывается оценка реализации каждого признака по всем решениям – максимальная оценка 5

4. По каждому столбцу находится сумма произведений оценки на соответствующий коэффициент значимости признака

5. Производят сортировку полученных значений по максимальному значению суммы и определяют предпочтительный вариант решения. По данным примера предпочтительный вариант имеет решение № 2 с суммой в 14,1 балла.

Таблица 3.12

Оценка признаков по каждому решению

Метод парных сравнений .
Метод реализуется путем парных сравнений признаков каждого УР и дальнейшей статистической обработкой УР (рис. 3.13). На схеме УР1 – УР5 – варианты УР, сравниваемых по набору их признаков.

Для осуществления парных сравнений по приведенной схеме УР записываются подряд в любом порядке. Затем эксперты сравнивают два первых УР, лучшее из них сравнивается с третьим УР и т.д. В результате парных сравнений выбирается одно лучшее УР.

Первый выбор

Второй выбор

Окончательный

Рис. 3.13 Схема реализации метода парных сравнений

Метод сценариев. Сценарий означает сюжетную схему, т.е. заранее подготовленный детальный план осуществления чего-либо. Сценарии позволяют с определенным уровнем достоверности выявить возмож­ные тенденции развития событий, взаимосвязи между взаимодейству­ющими факторами, сформировать картину состояний, к которым может прийти ситуация под влиянием конкретных воздействий. При подготовке сценария большое внимание обращают на критические точки ветвле­ния, т.е. точки, в которых малые воздействия оказывают заметное влия­ние на результат.

Каждый сценарий может быть реализован в нескольких вариантах. Вариант - небольшие (незначительные) изменения каких-либо парамет­ров системы в рамках сценария. Чем больше вариантов генерируется и анализируется, тем выше эффективность адресных опережающих воз­действий нa конкретные подсистемы объекта управления;

Разработка сценариев способствует предвидению потенциальной опасности, с которой сопряжены варианты управленческих воздействий и неблагоприятное развитие событий. Использование специальных компьютерных систем, а также датчиков случайных чисел, с последующим исключением невозможных ситуаций, расширяет горизонт анализа альтер­нативных вариантов в составе сценариев и выбор наиболее эффективного.

Структура сценария состоит из содержательной части и количественных параметров. В состав содержательной части рекомендуется включать:

· Историю развития объекта управления;

· Ситуацию, приведшую к необходимости его разработки;

· Цель, вытекающую из инициирующей ситуации;

· Исторические параллели решения аналогичных проблем;

· Описание внешней и внутренней среды организации;

· Решения по каждой проблеме;

· Перечень необходимых ресурсов для достижения цели;

· Прогнозирование возможных результатов.

В составе экспертных методов, наиболее активно используемых в настоящее время, наиболее известны метод «Дельфи» и метод мозговой атаки.

Метод Дельфи. Разработан Хилмером и Делки, является одним из основных методов проведения экспертиз. Свое название получил по храму греческого города Дельфи, где находился знаменитый во всем античном мире оракул, предсказывающий будущее. Предполагается, что предсказания оракула коллективно готовились жрецами храма, используя данную методику. В настоящее время представляет собой группу методов, объединенных общими требованиями к организации экспертных процедур и форме проведения экспертных оценок.

Метод предусматривает создание условий, обеспечивающих наиболее продуктивную работу экспертной комиссии: анонимность процедуры, с одной стороны, и возможность пополнить информацию о предмете экспертизы, с другой. Еще одно важное свойство – обратная связь, позволяющая экспертам корректировать свои суждения с учетом промежуточных усредненных оценок и пояснений экспертов, высказавших «крайние» точки зрения. Для реализации обратной связи необходима многотуровая процедура. Экспертизы по методу Дельфи проводятся, чаще всего, в четыре тура.

На первом туре экспертам сообщается цель экспертизы, и формулируются вопросы, ответы на которые составляют основное содержание экспертизы. Вопросы предъявляются каждому эксперту персонально в виде анкеты, иногда сопровождаемые пояснительной запиской. Информация, полученная от эксперта в виде оценки и ее обоснования, поступает в распоряжение аналитической группы. Она определяет экспертов, давших самую высокую и самую низкую оценку альтернативе, усредненное мнение экспертов – медиану , а также верхнюю и нижнюю квартили (т.е. значения оцениваемой альтернативы, выше и ниже которых расположены 25 % численных значений оценок). Расстояние между квартилями характеризует разброс экспертных оценок, и тем самым характеризует согласованность точек зрения экспертов (рис. 3.14).

Самая высокая оценка

Верхняя квартиль

Разброс Усредненная оценка (медиана)

Нижняя квартиль

Самая низкая оценка

Рис. 3.14 Значения оцениваемой альтернативы

На втором туре экспертам предъявляется усредненная оценка экспертной комиссии и обоснования экспертов, высказавших «крайние» точки зрения. Обоснования предъявляются анонимно, без указания давших их экспертов. После получения дополнительной информации эксперты, как правило, корректируют свои оценки. Скорректированная информация вновь поступает в аналитическую группу.

Третий и четвертый туры не отличаются от второго.

Характерной особенностью метода Дельфи является уменьшающийся от тура к туру разброс оценок экспертов, их возрастающая согласованность. В некоторых случаях согласованность может быть получена уже после второго тура. Тогда необходимость проведения следующих туров отпадает. Иногда требуется не менее пяти туров.

Степень согласованности мнений экспертов определяют коэффи­циентом вариаций , который не должен превышать 33 %. Он рассчитыва­ется по формуле:

где - среднее квадратическое отклонение оценок. Оно рассчитыва­ется по формуле:

где - среднее значение оценки; x i - оценка каждого эксперта; п - число экспертов.

Принимать решения можно либо на основе объективных данных (в том числе с помощью оптимизационных методов и вероятностно-статистических моделей), либо на основе мнений специалистов (экспертов). В задачах стратегического и оперативного управления, технико-экономического анализа, обеспечения экологической безопасности, управления природопользованием и охраны окружающей природной среды и т.п. постоянно используются разнообразные методы экспертных оценок. О них рассказывается в настоящей главе.

3.4.1. Основные идеи методов экспертных оценок

Примеры методов экспертных оценок. Как будет изменяться экономическая обстановка с течением времени? Что будет с окружающей природной средой через десять лет? Как изменится экологическая обстановка? Будет ли обеспечена экологическая безопасность промышленных производств или же вокруг станет простираться рукотворная пустыня? Достаточно вдуматься в эти постановки естественных вопросов, проанализировать, как десять или тем более двадцать лет назад мы представляли себе сегодняшний день, чтобы понять, что стопроцентно надежных прогнозов просто не может быть. Вместо утверждений с конкретными числами можно ожидать лишь качественных оценок. Тем не менее мы, менеджеры, экономисты, инженеры, должны принимать решения, например, об экологических и иных проектах и инвестициях, последствия которых скажутся через десять, двадцать и т.д. лет. Как быть? Остается обратиться к методам экспертных оценок. Что это за методы?

Бесспорно совершенно, что для принятия обоснованных решений необходимо опираться на опыт, знания и интуицию специалистов. После второй мировой войны в рамках кибернетики, теории управления, менеджмента и исследования операций стала развиваться самостоятельная дисциплина - теория и практика экспертных оценок.

Методы экспертных оценок - это методы организации работы со специалистами-экспертами и обработки мнений экспертов . Эти мнения обычно выражены частично в количественной, частично в качественной форме. Экспертные исследования проводят с целью подготовки информации для принятия решений ЛПР (напомним, ЛПР – лицо принимающее решение). Для проведения работы по методу экспертных оценок создают Рабочую группу (сокращенно РГ), которая и организует по поручению ЛПР деятельность экспертов, объединенных (формально или по существу) в экспертную комиссию (ЭК).

Экспертные оценки бывают индивидуальные и коллективные . Индивидуальные оценки - это оценки одного специалиста. Например, преподаватель единолично ставит отметку студенту, а врач - диагноз больному. Но в сложных случаях заболевания или угрозе отчисления студента за плохую учебу обращаются к коллективному мнению - симпозиуму врачей или комиссии преподавателей. Аналогичная ситуация - в армии. Обычно командующий принимает решение единолично. Но в сложных и ответственных ситуациях проводят военный совет. Один из наиболее известных примеров такого рода - военный совет 1812 г. в Филях, на котором под председательством М.И. Кутузова решался вопрос: "Давать или не давать французам сражение под Москвой?"

Другой простейший пример экспертных оценок - оценка номеров в КВН. Каждый из членов жюри поднимают фанерку со своей оценкой, а технический работник вычисляет среднюю арифметическую оценку, которая и объявляется как коллективное мнение жюри (ниже увидим, что такой подход некорректен с точки зрения теории измерений).

В фигурном катании процедура усложняется - перед усреднением отбрасываются самая большая и самая маленькая оценки. Это делается для того, чтобы не было соблазна завысить оценку одной спортсменке (например, соотечественнице) или занизить другой. Такие резко выделяющиеся из общего ряда оценки будут сразу отброшены.

Экспертные оценки часто используются при выборе, например:

Одного варианта технического устройства для запуска в серию из нескольких образцов,

Группы космонавтов из многих претендентов,

Набора проектов научно-исследовательских работ для финансирования из массы заявок,

Получателей экологических кредитов из многих желающих,

При выборе инвестиционных проектов для реализации среди представленных, и т.д.

Существует масса методов получения экспертных оценок. В одних с каждым экспертом работают отдельно, он даже не знает, кто еще является экспертом, а потому высказывает свое мнение независимо от авторитетов. В других экспертов собирают вместе для подготовки материалов для ЛПР, при этом эксперты обсуждают проблему друг с другом, учатся друг у друга, и неверные мнения отбрасываются. В одних методах число экспертов фиксировано и таково, чтобы статистические методы проверки согласованности мнений и затем их усреднения позволяли принимать обоснованные решения. В других - число экспертов растет в процессе проведения экспертизы, например, при использовании метода "снежного кома" (о нем - дальше).

Не меньше существует и методов обработки ответов экспертов, в том числе весьма насыщенных математикой и компьютеризированных. Многие из них основаны на достижениях статистики объектов нечисловой природы и других современных методах прикладной статистики.

Один из наиболее известных методов экспертных оценок - это метод "Дельфи" . Название дано по ассоциации с древним обычаем для получения поддержки при принятии решений обращаться в Дельфийский храм. Он был расположен у выхода ядовитых вулканических газов. Жрицы храма, надышавшись отравы, начинали пророчествовать, произнося непонятные слова. Специальные "переводчики" - жрецы храма толковали эти слова и отмечали на вопросы пришедших со своими проблемами паломников. По традиции говорят, что Дельфийский храм находился в Греции. Но там нет вулканов. Видимо, он был в Италии - у Везувия или Этны, а сами описанные предсказания происходили в XII-XIV вв. Это вытекает из высшего достижения современной исторической науки - новой статистической хронологии.

В США в 1960-х годах методом Дельфи назвали экспертную процедуру прогнозирования научно-технического развития. В первом туре эксперты называли вероятные даты тех или иных будущих свершений. Во втором туре каждый эксперт знакомился с прогнозами всех остальных. Если его прогноз сильно отличался от прогнозов основной массы, его просили пояснить свою позицию, и часто он изменял свои оценки, приближаясь к средним значениям. Эти средние значения и выдавались заказчику как групповое мнение. Надо сказать, что реальные результаты исследования оказались довольно скромными - хотя дата высадки американцев на Луну была предсказана с точностью до месяца, все остальные прогнозы провалились - холодного термоядерного синтеза и средства от рака в ХХ в. человечество не дождалось.

Однако сама методика оказалась популярной - за последующие годы она использовалась не менее 40 тыс. раз. Средняя стоимость экспертного исследования по методу Дельфи - 5 тыс. долларов США, но в ряде случаев приходилось расходовать и более крупные суммы - до 130 тыс. долларов.

Несколько в стороне от основного русла экспертных оценок лежит метод сценариев , применяемый прежде всего для экспертного прогнозирования. Рассмотрим основные идеи технологии сценарных экспертных прогнозов. Экологическое или социально-экономическое прогнозирование, как и любое прогнозирование вообще, может быть успешным лишь при некоторой стабильности условий. Однако решения органов власти, отдельных лиц, иные события меняют условия, и события развиваются по-иному, чем ранее предполагалось. Вполне очевидно, что после первого тура президентских выборов 1996 г. о дальнейшем развитии событий можно было говорить лишь в терминах сценариев: если во втором туре победит Б.Н. Ельцин, то будет то-то и то-то, если же победит Г.А. Зюганов, то события пойдут так-то и так-то.

Метод сценариев необходим не только в социально-экономической или экологической области. Например, при разработке методологического, программного и информационного обеспечения анализа риска химико-технологических проектов необходимо составить детальный каталог сценариев аварий, связанных с утечками токсических химических веществ. Каждый из таких сценариев описывает аварию своего типа, со своим индивидуальным происхождением, развитием, последствиями, возможностями предупреждения.

Таким образом, метод сценариев - это метод декомпозиции задачи прогнозирования, предусматривающий выделение набора отдельных вариантов развития событий (сценариев), в совокупности охватывающих все возможные варианты развития. При этом каждый отдельный сценарий должен допускать возможность достаточно точного прогнозирования, а общее число сценариев должно быть обозримо.

Возможность подобной декомпозиции не очевидна. При применении метода сценариев необходимо осуществить два этапа исследования:

Построение исчерпывающего, но обозримого набора сценариев;

Прогнозирование в рамках каждого конкретного сценария с целью получения ответов на интересующие исследователя вопросы.

Каждый из этих этапов лишь частично формализуем. Существенная часть рассуждений проводится на качественном уровне, как это принято в общественно-экономических и гуманитарных науках. Одна из причин заключается в том, что стремление к излишней формализации и математизации приводит к искусственному внесению определенности там, где ее нет по существу, либо к использованию громоздкого математического аппарата. Так, рассуждения на словесном уровне считаются доказательными в большинстве ситуаций, в то время как попытка уточнить смысл используемых слов с помощью, например, теории нечетких множеств приводит к весьма громоздким математическим моделям.

Набор сценариев должен быть обозрим. Приходится исключать различные маловероятные события - прилет инопланетян, падение астероида, массовые эпидемии ранее неизвестных болезней, и т.д. Само по себе создание набора сценариев - предмет экспертного исследования. Кроме того, эксперты могут оценить вероятности реализации того или иного сценария.

Прогнозирование в рамках каждого конкретного сценария с целью получения ответов на интересующие исследователя вопросы также осуществляется в соответствии с описанной выше методологией прогнозирования. При стабильных условиях могут быть применены статистические методы прогнозирования временных рядов. Однако этому предшествует анализ с помощью экспертов, причем зачастую прогнозирование на словесном уровне является достаточным (для получения интересующих исследователя и ЛПР выводов) и не требующим количественного уточнения.

Как известно, при принятии решений на основе анализа ситуации (как говорят, при ситуационном анализе ), в том числе анализе результатов прогнозных исследований, можно исходить из различных критериев. Так, можно ориентироваться на то, что ситуация сложится наихудшим, или наилучшим, или средним (в каком-либо смысле) образом. Можно попытаться наметить мероприятия, обеспечивающие минимально допустимые полезные результаты при любом варианте развития ситуации, и т.д.

Еще один вариант экспертного оценивания - мозговой штурм . Организуется он как собрание экспертов, на выступления которых наложено одно, но очень существенное ограничение - нельзя критиковать предложения других. Можно их развивать, можно высказывать свои идеи, но нельзя критиковать! В ходе заседания эксперты, "заражаясь" друг от друга, высказывают все более экстравагантные соображения. Часа через два записанное на магнитофон или видеокамеру заседание заканчивается, и начинается второй этап мозгового штурма - анализ высказанных идей. Обычно из 100 идей 30 заслуживают дальнейшей проработки, из 5-6 дают возможность сформулировать прикладные проекта, а 2-3 оказываются в итоге приносящими полезный эффект - прибыль, повышение экологической безопасности, оздоровление окружающей природной среды и т.п. При этом интерпретация идей - творческий процесс. Например, при обсуждении возможностей защиты кораблей от торпедной атаки была высказана идея: "Выстроить матросов вдоль борта и дуть на торпеду, чтобы изменить ее курс". После проработки эта идея привела к созданию специальных устройств, создающих волны, сбивающиеся торпеду с курса.

Основные стадии экспертного опроса. Более подробно рассмотрим отдельные этапы экспертного исследования. Как показывает опыт, с точки зрения менеджера - организатора такого исследования целесообразно выделять следующие стадии проведения экспертного опроса.

1) Принятие решения о необходимости проведения экспертного опроса и формулировка Лицом, Принимающим Решения (ЛПР) его цели. Таким образом, инициатива должна исходить от руководства, что в дальнейшем обеспечит успешное решение организационных и финансовых проблем. Очевидно, что исходный толчок может быть дан докладной запиской одного из сотрудников или дискуссией на совещании, но реальное начало работы - решение ЛПР.

2) Подбор и назначение ЛПР основного состава Рабочей группы, сокращенно РГ (обычно - научного руководителя и секретаря). При этом научный руководитель отвечает за организацию и проведение экспертного исследования в целом, а также за анализ собранных материалов и формулировку заключения экспертной комиссии. Он участвует в формировании коллектива экспертов и выдаче задания каждому эксперту (вместе с ЛПР или его представителем). Он сам - высококвалифицированный эксперт и признаваемый другими экспертами формальный и неформальный руководитель экспертной комиссии. Дело секретаря - ведение документации экспертного опроса, решение организационных задач.

3) Разработка РГ (точнее, ее основным составом, прежде всего научным руководителем и секретарем) и утверждение у ЛПР технического задания на проведение экспертного опроса . На этой стадии решение о проведении экспертного опроса приобретает четкость во времени, финансовом, кадровом, материальном и организационном обеспечении. В частности, формируется Рабочая Группа, в РГ выделяются различные группы специалистов - аналитическая, эконометрическая (специалисты по методам), компьютерная, по работе с экспертами (например, интервьюеров), организационная. Очень важно для успеха, чтобы все эти позиции были утверждены ЛПР.

4) Разработка аналитической группой РГ подробного сценария (т.е. регламента) проведения сбора и анализа экспертных мнений (оценок). Сценарий включает в себя прежде всего конкретный вид информации, которая будет получена от экспертов (например, слова, условные градации, числа, ранжировки, разбиения или иные виды объектов нечисловой природы). Например, довольно часто экспертов просят высказаться в свободной форме, ответив при этом на некоторые количество заранее сформулированных вопросов. Кроме того, их просят заполнить формальную карту, в каждом пункте выбрав одну из нескольких градаций. Сценарий должен содержать и конкретные методы анализа собранной информации. Например, вычисление медианы Кемени, статистический анализ люсианов, применение иных методов статистики объектов нечисловой природы и других разделов прикладной статистики (о некоторых из названных методов речь пойдет ниже). Эта работа ложится на эконометрическую и компьютерную группу РГ. Традиционная ошибка - сначала собрать информацию, а потом думать, что с ней делать. В результате, как показывает печальный опыт, информация используется не более чем на 1-2%.

5) Подбор экспертов в соответствии с их компетентностью. На этой стадии РГ составляет список возможных экспертов и оценивает степень их пригодности для планируемого исследования..

6) Формирование экспертной комиссии . На этой стадии РГ проводит переговоры с экспертами, получает их согласие на работу в экспертной комиссии (сокращенно ЭК). Возможно, часть намеченных РГ экспертов не может войти в экспертную комиссию (болезнь, отпуск, командировка и др.) или отказывается по тем или иным причинам (занятость, условия контракта и др.). ЛПР утверждает состав экспертной комиссии, возможно, вычеркнув или добавив часть экспертов к предложениям РГ. Проводится заключение договоров с экспертами об условиях их работы и ее оплаты.

7) Проведение сбора экспертной информации. Часто перед этим проводится набор и обучение интервьюеров - одной из групп, входящих в РГ.

8) Компьютерный анализ экспертной информации с помощью включенных в сценарий методов. Ему обычно предшествует введение информации в компьютеры.

9) При применении согласно сценарию экспертной процедуры из нескольких туров - повторение двух предыдущих этапов.

10) Итоговый анализ экспертных мнений, интерпретация полученных результатов аналитической группой РГ и подготовка заключительного документа ЭК для ЛПР.

11) Официальное окончание деятельности РГ, в том числе утверждение ЛПР заключительного документа ЭК , подготовка и утверждение научного и финансового отчетов РГ о проведении экспертного исследования, оплата труда экспертов и сотрудников РГ, официальное прекращение деятельности (роспуск) ЭК и РГ.

Разберем подробнее отдельные стадии экспертного исследования. Начнем с подбора экспертов: кадры решают все! Каковы эксперты - таково и качество заключения экспертной комиссии.

Подбор экспертов. Проблема подбора экспертов является одной из наиболее сложных в теории и практике экспертных исследований. Очевидно, в качестве экспертов необходимо использовать тех людей, чьи суждения наиболее помогут принятию адекватного решения. Но как выделить, найти, подобрать таких людей? Надо прямо сказать, что нет методов подбора экспертов, наверняка обеспечивающих успех экспертизы. Сейчас мы не будем обсуждать проблему существования различных "партий" среди экспертов и обратим внимание на различные иные стороны процедур подбора экспертов.

В проблеме подбора экспертов можно выделить две составляющие - составление списка возможных экспертов и выбор из них экспертной комиссии в соответствии с компетентностью кандидатов.

Составление списка возможных экспертов облегчается тогда, когда рассматриваемый вид экспертизы проводится многократно. В таких ситуациях обычно ведется реестр возможных экспертов, например, в области государственной экологической экспертизы или судейства фигурного катания, из которого можно выбирать по различным критериям или с помощью датчика (или таблицы) псевдослучайных чисел.

Как быть, если экспертиза проводится впервые, устоявшиеся списки возможных экспертов отсутствуют? Однако и в этом случае у каждого конкретного специалиста есть некоторое представление о том, что требуется от эксперта в подобной ситуации. Для формирования списка есть полезный метод "снежного кома", при котором от каждого специалиста, привлекаемого в качестве эксперта, получают определенное количество (обычно 5 - 10) фамилий тех, кто может быть экспертом по рассматриваемой тематике. Очевидно, некоторые из этих фамилий встречались ранее в деятельности РГ, а некоторые - новые. Каждого вновь появившегося опрашивают по той же схеме. Процесс расширения списка останавливается, когда новые фамилии практически перестают встречаться. В результате получается достаточно обширный список возможных экспертов. Метод "снежного кома" имеет и недостатки. Число туров до остановки процесса наращивания кома нельзя заранее предсказать. Кроме того, ясно, что если на первом этапе все эксперты были из одного "клана", придерживались в чем-то близких взглядов или занимались сходной деятельностью, то и метод "снежного кома" даст, скорее всего, лиц из этого же "клана". Мнения и аргументы других "кланов" будут упущены. (Здесь речь идет о том, что сообщество специалистов реально разбито на группы, названные выше "кланами", и общение идет в основном внутри "кланов". Неформальная структура науки, к которой относятся "кланы", достаточно сложна для изучения. Отметим здесь, что "кланы" обычно образуются на основе крупных формальных центров (вузов, научных институтов), научных школ.)

Вопрос об оценке компетентности экспертов не менее сложен. Ясно, что успешность участия в предыдущих экспертизах - хороший критерий для деятельности дегустатора, врача, судьи в спортивных соревнованиях, т.е. таких экспертов, которые участвуют в длинных сериях однотипных экспертиз. Однако, увы, наиболее интересны и важны уникальные экспертизы больших проектов, не имеющих аналогов. Использование формальных показателей экспертов (должность, ученые степень и звание, стаж, число публикаций...), очевидно, в современных быстро меняющихся условиях может носить лишь вспомогательный характер, хотя подобные показатели проще всего применять.

Часто предлагают использовать методы самооценки и взаимооценки компетентности экспертов. Обсудим их, начав с метода самооценки, при котором эксперт сам дает информацию о том, в каких областях он компетентен, а в каких - нет. С одной стороны, кто лучше может знать возможности эксперта, чем он сам? С другой стороны, при самооценке компетентности скорее оценивается степень самоуверенности эксперта, чем его реальная компетентность. Тем более, что само понятие "компетентность" строго не определено. Можно его уточнять, выделяя составляющие, но при этом усложняется предварительная часть деятельности экспертной комиссии. Достаточно часто эксперт преувеличивает свою реальную компетентность. Например, большинство людей считают, что они хорошо разбираются в политике, экономике, проблемах образования и воспитания, семьи и медицины. На самом деле экспертов (и даже знающих людей) в этих областях весьма мало. Бывают уклонения и в другую сторону, излишне критичное отношение к своим возможностям.

При использовании метода взаимооценки, помимо возможности проявления личностных и групповых симпатий и антипатий, играет роль малая осведомленность экспертов о возможностях друг друга. В современных условиях достаточно хорошее знакомство с работами и возможностями друг друга может быть лишь у специалистов, много лет (не менее 3-4) работающих совместно, в одной комнате, над одной темой. Именно про такие пары можно сказать, что они "вместе пуд соли съели ". Однако привлечение таких пар специалистов не очень-то целесообразно, поскольку их взгляды из-за схожести жизненного пути слишком похожи друг на друга.

Если процедура экспертного опроса предполагает непосредственное общение экспертов, необходимо учитывать еще ряд обстоятельств. Большое значение имеют их личностные (социально-психологические) качества. Так, один-единственный "говорун " может парализовать деятельность всей комиссии на совместном заседании. К срыву могут привести и неприязненные отношения членов комиссии, и сильно различающийся научный и должностной статус членов комиссии. В подобных случаях важно соблюдение регламента работы, разработанного РГ.

Необходимо подчеркнуть, что подбор экспертов – одна из основных функций Рабочей группы, и никакие методики подбора не снимают с нее ответственности. Другими словами, именно на Рабочей группе лежит ответственность за компетентность экспертов, за их принципиальную способность решить поставленную задачу. Важным является требование к ЛПР об утверждении списка экспертов. При этом ЛПР может как добавить в комиссию отдельных экспертов, так и вычеркнуть некоторых из них - по собственным соображениям, с которыми членам РГ и ЭК знакомиться нет необходимости.

Существует ряд нормативных документов, регулирующих деятельность экспертных комиссий в тех или иных областях. Примером является Закон Российской Федерации "Об экологической экспертизе" от 23 ноября 1995 г., в котором регламентируется процедура экспертизы "намечаемой хозяйственной или иной деятельности" с целью выявления возможного вреда, который может нанести рассматриваемая деятельность окружающей природной среде.

О разработке регламента проведения сбора и анализа экспертных мнений. Существует масса методов получения экспертных оценок. В одних с каждым экспертом работают отдельно, он даже не знает, кто еще является экспертом, а потому высказывает свое мнение независимо от авторитетов, "кланов" и отдельных коллег. В других экспертов собирают вместе для подготовки материалов для ЛПР, при этом эксперты обсуждают проблему друг с другом, принимают или отвергают аргументы друг друга, учатся друг у друга, и неверные или недостаточно обоснованные мнения отбрасываются. В одних методах число экспертов фиксировано и таково, чтобы статистические методы проверки согласованности мнений и затем (в случае достаточно хорошей согласованности мнений) их усреднения позволяли принимать обоснованные решения с точки зрения эконометрики. В других - число экспертов растет в процессе проведения экспертизы, например, при использовании метода "снежного кома" для формирования команды экспертов.

В настоящее время не существует общепринятой научно обоснованной классификации методов экспертных оценок и тем более - однозначных рекомендаций по их применению. Попытка силой утвердить одну из возможных точек зрения на классификацию методов экспертных оценок может принести лишь вред.

Однако для рассказа о многообразии экспертных оценок необходима какая-либо рабочая классификация методов. Одну из таких возможных классификаций мы даем ниже, перечисляя основания, по которым мы делим экспертные оценки.

Один из основных вопросов - что именно должна представить экспертная комиссия в результате своей работы - информацию для принятия решения ЛПР или проект самого решения? От ответа на этот методологический вопрос зависит организация работы экспертной комиссии, и он служит первым основанием для разбиения методов.

ЦЕЛЬ - СБОР ИНФОРМАЦИИ ДЛЯ ЛПР. Тогда Рабочая группа должна собрать возможно больше относящейся к делу информации, аргументов "за" и "против" определенных вариантов решений. Полезен следующий метод постепенного увеличения числа экспертов. Сначала первый эксперт приводит свои соображения по рассматриваемому вопросу. Составленный им материал передается второму эксперту, который добавляет свои аргументы. Накопленный материал поступает к следующему - третьему - эксперту... Процедура заканчивается, когда иссякает поток новых соображений.

Отметим, что эксперты в рассматриваемом методе только поставляют информацию, аргументы "за" и "против", но не вырабатывают согласованного проекта решения. Нет никакой необходимости стремиться к тому, чтобы экспертные мнения были согласованы между собой. Более того, наибольшую пользу приносят эксперты с мышлением, отклоняющимся от массового. Именно от них следует ожидать наиболее оригинальных аргументов.

ЦЕЛЬ - ПОДГОТОВКА ПРОЕКТА РЕШЕНИЯ ДЛЯ ЛПР. Математические методы в экспертных оценках применяются обычно именно для решения задач, связанных с подготовкой проекта решения. При этом зачастую некритически принимают догмы согласованности и одномерности. Эти догмы "кочуют" из одной публикации в другую, поэтому целесообразно их обсудить.

ДОГМА СОГЛАСОВАННОСТИ. Часто без всяких оснований считается, что решение может быть принято лишь на основе согласованных мнений экспертов. Поэтому исключают из экспертной группы тех, чье мнение отличается от мнения большинства. При этом отсеиваются как неквалифицированные лица, попавшие в состав экспертной комиссии по недоразумению или по соображениям, не имеющим отношения к их профессиональному уровню, так и наиболее оригинальные мыслители, глубже проникшие в проблему, чем большинство. Следовало бы выяснить их аргументы, предоставить им возможность для обоснования их точек зрения. Вместо этого их мнением пренебрегают.

Бывает и так, что эксперты делятся на две или более групп, имеющих единые групповые точки зрения. Так, известен пример деления специалистов при оценке результатов научно-исследовательских работ на две группы: "теоретиков", явно предпочитающих НИР, в которых получены теоретические результаты, и "практиков", выбирающих те НИР, которые позволяют получать непосредственные прикладные результаты (речь идет о конкурсе НИР в академическом Институте проблем управления (автоматики и телемеханики)).

Иногда заявляют, что в случае обнаружения двух или нескольких групп экспертов (вместо одной согласованной во мнениях) опрос не достиг цели. Это не так! Цель достигнута - установлено, что единого мнения нет. Это весьма важно. И ЛПР при принятии решений должен это учитывать. Стремление обеспечить согласованность мнений экспертов любой целой может приводить к сознательному одностороннему подбору экспертов, игнорированию всех точек зрения, кроме одной, наиболее полюбившейся Рабочей группе (или даже "подсказанной" ЛПР).

Часто не учитывают еще одного чисто эконометрического обстоятельства. Поскольку число экспертов обычно не превышает 20-30, то формальная статистическая согласованность мнений экспертов (установленная с помощью тех или иных критериев проверки статистических гипотез) может сочетаться с реально имеющимся разделением экспертов на группы, что делает дальнейшие расчеты не имеющими отношения к действительности. Для примера обратимся к конкретным методам расчетов с помощью коэффициентов конкордации (т.е. - в переводе - согласия) на основе коэффициентов ранговой корреляции Кендалла или Спирмена. Необходимо напомнить, что согласно эконометрической теории положительный результат проверки согласованности таким способом означает ни больше, ни меньше, как отклонение гипотезы о независимости и равномерной распределенности мнений экспертов на множестве всех ранжировок. Таким образом, проверяется нулевая гипотеза, согласно которой ранжировки, описывающие мнения экспертов, являются независимыми случайными бинарными отношениями, равномерно распределенными на множестве всех ранжировок. Отклонение этой нулевой гипотезы по дурной традиции толкуется как согласованность ответов экспертов. Другими словами, мы падаем жертвой заблуждений, вытекающих из своеобразного толкования слов: проверка согласованности в указанном математико-статистическом смысле вовсе не является проверкой согласованности в смысле практики экспертных оценок. (Именно ущербность рассматриваемых математико-статистических методов анализа ранжировок привела группу специалистов к разработке нового эконометрического аппарата для проверки согласованности - непараметрических методов, основанных на т.н. люсианах и входящих в современный раздел эконометрики - статистику нечисловых данных ). Группы экспертов с близкими методами можно выделить эконометрическими методами кластер-анализа.

МНЕНИЯ ДИССИДЕНТОВ. С целью искусственно добиться согласованности стараются уменьшить влияние мнений экспертов-диссидентов , т.е. инакомыслящих по сравнению с большинством. Жесткий способ борьбы с диссидентами состоит в игнорировании их мнений, т.е. фактически в их исключении из состава экспертной комиссии. Отбраковка экспертов, как и отбраковка резко выделяющихся результатов наблюдений (выбросов), приводит к процедурам, имеющим плохие или неизвестные статистические свойства. Так, известна крайняя неустойчивость классических методов отбраковки выбросов по отношению к отклонениям от предпосылок модели (см., например, учебное пособие ).

Мягкий способ борьбы с диссидентами состоит в применении робастных (устойчивых) статистических процедур . Простейший пример: если ответ эксперта - действительное число, то резко выделяющееся мнение диссидента сильно влияет на среднее арифметическое ответов экспертов и не влияет на их медиану. Поэтому разумно в качестве согласованного мнения рассматривать медиану. Однако при этом игнорируются (не достигают ЛПР) аргументы диссидентов.

В любом из двух способов борьбы с диссидентами ЛПР лишается информации, идущей от диссидентов, а потому может принять необоснованное решение, которое впоследствии приведет к отрицательным последствиям. С другой стороны, представление ЛПР всего набора мнений снимает часть ответственности и труда по подготовке окончательного решения с комиссии экспертов и рабочей группы по проведению экспертного опроса и перекладывает эти ответственность и труд на плечи ЛПР.

ДОГМА ОДНОМЕРНОСТИ. В устаревшей, а иногда и в современной научно-технической литературе распространен довольно спорный подход так называемой "квалиметрии", согласно которому объект экспертизы всегда можно оценить одним числом . Странная идея! Оценивать человека одним числом приходило в голову лишь на невольничьих рынках . Вряд ли даже самые рьяные квалиметристы рассматривают книгу или картину как эквивалент числа - ее "рыночной стоимости". Практически все реальные объекты достаточно сложны, а потому сколько-нибудь точно описать их можно лишь с помощью многих и многих чисел, а также математических объектов нечисловой природы.

Вместе с тем нельзя полностью отрицать саму идею поиска обобщенных показателей качества, технического уровня и аналогичных. Так, каждый объект можно оценивать по многим показателям качества. Например, легковой автомобиль можно оценивать по таким показателям:

расход бензина на 100 км пути (в среднем);

надежность (в том числе средняя стоимость ремонта за год);

экологическая безопасность, оцениваемая по содержанию вредных веществ в выхлопных газах;

маневренность (в том числе радиус поворота);

быстрота набора скорости 100 км/час после начала движения; максимальная достигаемая скорость;

длительность сохранения в салоне положительной температуры при низкой наружной температуре (например, минус пятьдесят градусов по Цельсию) и выключенном двигателе;

дизайн (привлекательность и "модность" внешнего вида и отделки салона);

вес, и т.д.

Можно ли свести оценки по этим показателям вместе? Ясно, что определяющей является конкретная ситуация, для которой выбирается автомашина. Максимально достигаемая скорость важна для гонщика, но, как нам представляется, не имеет большого практического значения для водителя рядовой частной машины, особенно в городе с суровым ограничением на максимальную скорость. Для такого водителя важнее расход бензина, маневренность и надежность. Для машин различных служб государственного управления, видимо, надежность важнее, чем для частника, а расход бензина - наоборот. Для районов Крайнего Севера важна теплоизоляция салона, а для южных районов - нет. И т.д.

Таким образом, важна конкретная (узкая) постановка задачи перед экспертами. Но такой постановки зачастую нет. А тогда "игры" по разработке обобщенного показателя качества - например, в виде линейной функции от перечисленных переменных - не могут дать объективных выводов. Альтернативой единственному обобщенному показателю является математический аппарат типа многокритериальной оптимизации - множества Парето и т.д.

В некоторых случаях все-таки можно глобально сравнить объекты - например, с помощью тех же экспертов получить упорядочение рассматриваемых объектов - изделий или проектов. Тогда можно ПОДОБРАТЬ коэффициенты при отдельных показателях так, чтобы упорядочение с помощью линейной функции возможно точнее соответствовало глобальному упорядочению (например, найти эти коэффициенты методом наименьших квадратов). Наоборот, в подобных случаях НЕ СЛЕДУЕТ оценивать указанные коэффициенты с помощью экспертов. Эта простая идея до сих пор не стала очевидной для отдельных составителей методик по проведению экспертных опросов и анализу их результатов. Они упорно стараются заставить экспертов делать то, что они выполнить не в состоянии - указывать веса, с которыми отдельные показатели качества должны входить в итоговый обобщенный показатель.

Эксперты обычно могут сравнить объекты или проекты в целом, но не могут вычленить вклад отдельных факторов. Раз организаторы опроса спрашивают, эксперты отвечают, но эти ответы не несут в себе надежной информации о реальности...

ВТОРОЕ ОСНОВАНИЕ КЛАССИФИКАЦИИ ЭКСПЕРТНЫХ ПРОЦЕДУР - ЧИСЛО ТУРОВ. Экспертизы могут включать один тур, некоторое фиксированное число туров (два, три,…) или неопределенное число туров. Чем больше туров, тем более тщательным является анализ ситуации, поскольку эксперты при этом обычно много раз возвращаются к рассмотрению предмета экспертизы. Но одновременно увеличивается общее время на экспертизу и возрастает ее стоимость. Можно уменьшить расходы, вводя в экспертизу не всех экспертов сразу, а постепенно. Так, например, если цель состоит в сборе аргументов "за" и "против", то первоначальный перечень аргументов может быть составлен одним экспертом. Второй добавит к нему свои аргументы. Суммарный материал поступит к первому и третьему, которые внесут свои аргументы и контраргументы. И так далее - добавляется по одному эксперту на каждый новый тур.

Наибольшие сложности вызывают процедуры с заранее неопределенным числом туров, например, "снежный ком". Часто задают максимально возможное число туров, и тогда неопределенность сводится к тому, придется ли проводить это максимальное число туров или удастся ограничиться меньшим числом.

ТРЕТЬЕ ОСНОВАНИЕ КЛАССИФИКАЦИИ ЭКСПЕРТНЫХ ПРОЦЕДУР - ОРГАНИЗАЦИЯ ОБЩЕНИЯ ЭКСПЕРТОВ. Рассмотрим достоинства и недостатки каждого из элементов шкалы: отсутствие общения - заочное анонимное общение - заочное общение без анонимности - очное общение с ограничениями - очное общение без ограничений. При отсутствии общения эксперт высказывает свое мнение, ничего не зная о других экспертах и об их мнениях. Он полностью независим, что и хорошо, и плохо. Обычно такая ситуация соответствует однотуровой экспертизе. Заочное анонимное общение , например, как в методе Дельфи, означает, что эксперт знакомится с мнениями и аргументами других экспертов, но не знает, кто именно высказал то или иное положение. Следовательно, в экспертизе должно быть предусмотрено хотя бы два тура. Заочное общение без анонимности соответствует, например, общению по Интернету. Все варианты заочной экспертизы хороши тем, что нет необходимости собирать экспертов вместе, следовательно, находить для этого удобное время и место.

При очных экспертизах эксперты говорят, а не пишут, как при заочных, и потому успевают за то же время сказать существенно больше. Очная экспертиза с ограничениями весьма распространена. Это - собрание, идущее по фиксированному регламенту. Примером является военный совет в императорской русской армии, когда эксперты (офицеры и генералы) высказывались в порядке от младшего (по чину и должности) к старшему. Наконец, очная экспертиза без ограничений - это свободная дискуссия. Все очные экспертизы имеют недостатки, связанные с возможностями отрицательного влияния на их проведение социально-психологических свойств и клановых (партийных) пристрастий участников, а также неравенства их профессионального, должностного, научного статусов. Представьте себе, что соберутся вместе 5 лейтенантов и 3 генерала. Независимо от того, какая информация имеется у того или иного участника встречи, ход ее предсказать нетрудно: генералы будут беседовать, а лейтенанты - помалкивать. При этом вполне очевидно, что лейтенанты получили образование позже генералов, а потому обладают полезной информацией, которой нет у генералов.

КОМБИНАЦИЯ РАЗЛИЧНЫХ ВИДОВ ЭКСПЕРТИЗЫ. Реальные экспертизы часто представляют собой комбинации различных описанных выше типов экспертиз. В качестве примера рассмотрим защиту студентом дипломного проекта. Сначала идет многотуровая очная экспертиза, проводимая научным руководителем и консультантами, в результате студент подготавливает проект к защите. Затем два эксперта работают заочно - это автор отзыва сторонней организации и заведующий кафедрой, допускающий работу к защите. Обратите внимание на различие задач этих экспертов и объемов выполняемой ими работы - один пишет подробный отзыв, второй росписью на титульном листе проекта разрешает его защиту. Наконец - очная экспертиза без ограничений (для членов ГАК - государственной аттестационной комиссии). Дипломный проект оценивается коллегиально, по большинству голосов, при этом один из экспертов (научный руководитель) знает работу подробно, а остальные - в основном лишь по докладу. Отметим, что мнения экспертов учитываются с весами, а именно, мнения членов ГАК - с весом 1, мнения всех остальных - с весом 0 (совещательный голос). Таким образом, имеем сочетание многотуровой и однотуровой, заочных и очных экспертиз. Подобные сочетания характерны для многих реально проводящихся экспертиз.


МИНИСТЕРСТВО ОБРАЗОВАНИЯ И НАУКИ РОССИЙСКОЙ ФЕДЕРАЦИИ

ФЕДЕРАЛЬНОЕ АГЕНТСТВО ПО ОБРАЗОВАНИЮ
Тихоокеанский Государственный Экономический Университет
Филиал в г. Уссурийске

Кафедра экономики и управления

Курсовая работа

По дисциплине: «Менеджмент»

На тему: « Экспертные методы принятия решений»

                Выполнила: Рогозина А.В.
                студентка 2 курса очного отделения
                Специальность: Финансы и кредит
                Научный руководитель: Чаленко Н.Н., к.и.н., доцент
Уссурийск – 2008
ВВЕДЕНИЕ 1. ЭКСПЕРТИЗА В УПРАВЛЕНИИ
    1.1. Экспертиза как метод оценки принятия решений
    1.2. Роль экспертов в управлении
2. ОРГАНИЗАЦИЯ ЭКСПЕРТНОГО ОЦЕНИВАНИЯ
    2.1. Подбор и опрос экспертов
    2.2. Основные методы экспертной оценки
ЗАКЛЮЧЕНИЕ
СПИСОК ИСПОЛЬЗОВАННЫХ ИСТОЧНИКОВ
3 5
5
10
14
14
19
28
30

ВВЕДЕНИЕ

Процессы принятия решений, понимаемые как выбор одной из нескольких возможных альтернатив, пронизывают всю человеческую жизнь. Большинство решений мы принимаем не задумываясь, так как существует автоматизм поведения, выработанный многолетней практикой. Есть решения, которым мы придаем малое значение, и поэтому мало задумываемся при осуществлении выбора. И, наконец, существуют проблемы выбора, решая которые, человек испытывает мучительные раздумья. Выработка и принятие решения – узловая процедура в деятельности руководителя, которая определяет весь дальнейший ход процесса управления, в особенности конечный результат управленческой деятельности. Современная экономика предъявляет новые, более высокие требования к управлению. Вопросы совершенствования методов управления приобретают сейчас очень важное значение, поскольку именно в этой сфере имеются еще большие резервы роста эффективности народного хозяйства.
Бесспорно, совершенно, что для принятия обоснованных решений необходимо опираться на опыт, знания и интуицию специалистов. В связи с этим все шире используются экспертные методы, под которыми понимают комплекс логических и математико-статистических методов и процедур, направленных на получение от специалистов информации, необходимой для подготовки и выбора рациональных решений.
Экспертные методы применяют сейчас в ситуациях, когда выбор, обоснование и оценка последствий решений не могут быть выполнены на основе точных расчетов. Такие ситуации нередко возникают при разработке современных проблем управления общественным производством и, особенно, при прогнозировании и долгосрочном планировании. В последние годы экспертные оценки находят широкое применение в социально-политическом и научно-техническом прогнозировании, в планировании народного хозяйства, отраслей, объединений, в разработке крупных научно-технических, экономических и социальных программ, в решении отдельных проблем управления.
В ходе развития общественного производства возрастают не только сложность управления, но и требования к качеству принимаемых решений. Для того чтобы повысить обоснованность решений и учесть многочисленные факторы, оказывающие влияние на их результаты, необходим разносторонний анализ, основанный как на расчетах, так и на аргументированных суждениях руководителей и специалистов, знакомых с состоянием дел и перспективами развития в различных областях практической деятельности.
Применение экспертных методов обеспечивает активное и целенаправленное участие специалистов на всех этапах принятия решений, что позволяет существенно повысить их качество и эффективность. Таким образом, данная проблема является чрезвычайно актуальной.
Предметом исследования данной работы является теория менеджмента, включающая в себя теорию принятия управленчкских решений. Объект исследования - экспертные методы, рассматриваемые как совокупность процедур направленных на получение информации для выбора оптимального решения.
При написании данной курсовой работы автор опирался, в основном, на монографические труды таких специалистов, как А.И.Орлов и А.Е.Шумский.
Целью данной работы является изучение метода экспертных оценок - одного из важнейших этапов принятия грамотных управленческих решений.
Достижение данной цели предполагает решение следующих задач:
- изучение роли экспертизы в управлении;
- рассмотрение порядка организации экспертного оценивания;
- исследование основных методов экспертного оценивания.

1. ЭКСПЕРТИЗА В УПРАВЛЕНИИ

    1.1. Экспертиза как метод оценки принятия решений
Сложность производственных систем, разнообразие и во многих случаях неопределенный характер поступающей производственной информации придают задаче управления творческий характер, повышающий, а зачастую делающий незаменимой, роль человеческого фактора . Это непосредственно проявляется в возрастающей роли в современном управлении и планировании производства метода экспертных оценок. Данный метод заключается в проведении группой соответствующим образом аккредитованных лиц (экспертов) анализа задачи с последующей количественной оценкой вынесенных суждений. При выполнении своей роли в процессе управления эксперты производят две основные функции: формируют объекты (альтернативные ситуации, цели, решения и т. п.) и производят измерение их характеристик (вероятности свершения событий, коэффициенты значимости целей, предпочтения решений и т. п.). Формирование объектов осуществляется экспертами на основе логического мышления и интуиции. При этом большую роль играют знания и опыт эксперта. Измерение характеристик объектов требует от экспертов знания теории измерений.
Характерными особенностями метода экспертных оценок как научного инструмента решения сложных неформализуемых проблем являются, во-первых, научно обоснованная организация проведения всех этапов экспертизы, обеспечивающая наибольшую эффективность работы на каждом из этапов, и, во-вторых, применение количественных методов, как при организации экспертизы, так и при оценке суждений экспертов и формальной групповой обработке результатов . Эти две особенности отличают метод экспертных оценок от обычной давно известной экспертизы, широко применяемой в различных сферах человеческой деятельности. Задача эксперта (индивидуального или коллективного) состоит в выделении и формировании подлежащих анализу событий и явлений, в создании необходимых гипотез, определении целей, выделении признаков и категорий для описания и классификации объектов и их взаимосвязей, а также в оценке и определении достоверности выделенных объектов, явлений и свойств. Объекты, подвергаемые экспертизе, могут быть разделены на объекты, обладающие и не обладающие достаточным информационным потенциалом. В первом случае экспертиза выполняет в основном роль количественного измерения информации, а во втором служит для вынесения качественных суждений и в отличие от первого случая не может сводиться к осреднению предложенных отдельных количественных оценок.
В роли экспертов, как правило, выступают опытные руководители, специалисты, приглашаемые со стороны, имеющие опыт и специальные знания в узкой области, владеющие методами исследования. Эксперт должен быть способен синтезировать информацию, объединить специальные знания и опыт, методы исследования со знанием особенностей исследуемого объекта и дать объективные квалифицированные рекомендации. Необходимо также отметить, что в настоящее время не существует общепринятой единой методики оценки качеств эксперта, поэтому мнения о профессиональном уровне специалиста нередко существенно расходятся .
Экспертизу должны проводить люди, обладающие компетентностью, креативностью, конформизмом, конструктивным мышлением, чувством коллективизма, самокритичностью, а также должным образом относящиеся к проведению экспертизы . Эти характеристики в большинстве случаев оцениваются качественно и лишь для компетентности существуют некоторые методы количественной оценки. Под компетентностью понимают степень квалификации эксперта и возможность относиться к его суждениям с доверием. Оценивается компетентность так называемым коэффициентом компетентности, который служит весовым коэффициентом при учете мнения данного эксперта. Определение значения коэффициента компетентности может производиться априори и апостериори. В первом случае он вычисляется на основе самооценки данного эксперта и взаимной оценки с привлечением других экспертов. Во втором случае оценивается на основе учета результатов проведенной экспертизы и их соотношения с фактически развивающимися событиями. Возможно и сочетание обоих подходов. Распространена оценка коэффициента компетентности на основании регистрации суждений специалистов о целесообразности включения конкретного лица в состав группы экспертов. В этом случае подсчитывается число голосов, поданных за того или иного эксперта, и делится на общее число голосов. Иными словами, коэффициент компетентности эксперта определяется как относительное число лиц, высказавшихся за его включение в группу экспертов.
Остальные из перечисленных выше качеств экспертов определяются в настоящее время лишь качественно. Креативность - способность решать творческие, в значительной степени неопределенные и неформализованные задачи . Конформизм (противоположен ему нонконформизм) - свойство поддаваться общему мнению или мнению авторитетов, что особенно проявляется в различного рода дискуссионных моментах. Конструктивность мышления - способность эксперта давать практически полезные оценки и исполнимые предложения и решения. Самокритичность и коллективизм -способность эксперта давать самому себе и своей деятельности объективную оценку, не вступающую в противоречие с мнением других участников экспертизы, и работать во взаимодействии с ними .
Однако, даже обладая всеми необходимыми объективными качествами, эксперт может принести немного пользы, а иногда и нанести существенный вред, если не будет субъективно относиться к проводимой работе по экспертизе как к главной и имеющей лично для него определяющее значение.
Область применения метода экспертных оценок весьма широка. Перечислим типовые задачи, решаемые методом экспертных оценок:
- составление перечня возможных событий в различных областях за определенный промежуток времени;
- определение наиболее вероятных интервалов времени свершения совокупности событий;
- определение целей и задач управления с упорядочением их по степени важности;
- определение альтернативных (вариантов решения задачи с оценкой их предпочтения;
- альтернативное распределение ресурсов для решения задач с оценкой их предпочтительности;
- альтернативные варианты принятия решений в определенной ситуации с оценкой их предпочтительности.
Для решения перечисленных типовых задач в настоящее время применяются различные разновидности метода экспертных оценок. К основным видам относятся: анкетирование и интервьюирование; мозговой штурм; дискуссия; совещание; оперативная игра; сценарий.
Каждый из этих видов экспертного оценивания обладает своими преимуществами и недостатками, определяющими рациональную область применения. Во многих случаях наибольший эффект дает комплексное применение нескольких видов экспертизы.
Для выбора наилучшего управленческого решения необходим набор критериев эффективности . Каждый критерий такого набора может иметь количественное или качественное выражение, быть простым и понятным для специалистов. Критерии могут быть единичными и составными. В набор критериев для выбора управленческого решения чаще всего включают следующее: выполнимость, прибыль, время, производительность труда, затраты, использование имеющегося оборудования и производственных фондов, экологическую и техническую безопасность, качество продукции. Каждый критерий характеризуется набором показателей и их значениями.
Например, критерий «время» может иметь несколько показателей: время реализации, время разработки, время согласования и др. . Значения данных показателей задаются в месяцах, днях, часах и т.д. Показатели можно дробить на более мелкие, например, показатель «время согласования управленческого решения» можно представить в виде трех подпоказателей - время согласования с заказчиками, время согласования с департаментом экологической безопасности, время согласования с пожарными службами.
Показатели критериев могут иметь максимальные, минимальные, промежуточные численные или качественные значения.
Часто указывают не конкретное значение параметра, а направление, например, максимальная прибыль, наименьшее время, минимальные финансовые затраты. Это не всегда правильно и не всегда нужно. Приоритет максимальной прибыли может привести к криминалу, минимальное время - к низкому качеству продукции или к выходу продукции на неподготовленный рынок, а минимальные финансовые ресурсы для разработки и реализации управленческого решения - к возможному прекращению его выполнения на промежуточных стадиях.
В набор могут входить один, два или более критериев . С увеличением критериев возрастает правильность выбора решения, однако увеличивается стоимость его оценки, так как нужно оплачивать труд экспертов, приобретать необходимые для оценки материалы и технику. Руководителю не стоит гнаться за большим количеством критериев. Если критериев достаточно много, их необходимо сгруппировать вокруг основного критерия путем формирования набора коэффициентов приоритета.
Экспертное заключение оформляется в форме документа, в котором фиксируются ход исследования и его итоги. Введение содержит данные: кто, где, когда, в связи, с чем организует и проводит экспертизу. Далее фиксируется объект экспертизы, указываются методы, примененные для его исследования, и полученные в результате исследования данные. В заключительной части содержатся выводы, рекомендации, практические меры, предлагаемые экспертами. Выводы могут иметь категорическую формулировку ("да", "нет") и вероятностную (предположение).

1.2. Роль экспертов в управлении

Современное общество развивается под постоянно усиливающимся воздействием научно-технической революции, которая вызывает коренные преобразования в производстве, глубокие изменения в структуре и экономике народного хозяйства. Происходящая научно-техническая революция по своему влиянию далеко выходит за пределы сферы материального производства, захватывая все стороны жизнедеятельности общества, предопределяя большинство решений, направленных на его рациональное экономическое и социальное развитие.
История развития науки, техники и производства показывает, что одновременно с последовательным замещением функций человека функциями машин увеличивается его роль в сфере управления. Непрерывный рост объема затрат на развитие науки, на создание новой техники и совершенствование производства существенно повышает значимость решений, принимаемых на всех уровнях управления народным хозяйством. Будущее науки, техники и экономики в значительной мере зависит от качества и своевременности этих решений, а объективные тенденции научно-технического прогресса могут ускоряться или замедляться под их воздействием .
Особое значение в управлении сейчас приобретают методы оптимизации, основанные на применении формальных, чаще всего математических моделей, обеспечивающих экономию времени и средств при решении многих практических задач. Построение моделей помогает привести сложные и подчас неопределенные факторы, связанные с проблемой принятия решений, в логически стройную схему, определить, какие данные необходимы для оценки и выбора альтернатив.
В процессе управления возникает естественное стремление к отысканию решения, которое объективно является наилучшим из всех возможных . В качестве инструмента оптимизации сейчас широко используется математическое программирование. Успехи в применении математического программирования к решению различного рода хозяйственных, научных, технических и военных задач породили методологические воззрения, согласно которым кардинальное решение проблем управления возможно только тогда, когда все его аспекты отображаются в системе взаимосвязанных математических моделей.
Однако формализация технико-экономических и управленческих решений осложняется рядом особенностей современного этапа научно-технического прогресса. Жизнь общества настолько сложна, что трудно рассчитывать на появление моделей, которые полностью отражали бы природу и количественные взаимосвязи социально-экономических процессов. Реальная действительность всегда сложнее самых тонких математических моделей, а ее развитие часто опережает формальное познание. Задачи управления требуют в качестве неотъемлемого элемента решения участия людей. И, наконец, сам процесс управления всегда предполагает ориентацию не только на числовые данные, но и на обычный здравый смысл. Использование математического программирования и вычислительной техники позволяет принимать решения, основанные на более полной и надежной информации. Но, несомненно и то, что при любых условиях для выбора рационального решения требуется нечто большее, чем хорошая математическая модель.
Принимая решения, мы обычно предполагаем, что информация, используемая для их обоснования, достоверно и надежна . Но для многих экономических и научно-технических задач, являющихся по своему характеру качественно новыми и неповторяющимися, это предположение либо заведомо не реализуется, либо в момент принятия решения его не удается доказать.
Наличие информации и правильность ее использования в значительной степени предопределяют оптимальность выбранного решения. Кроме данных, состоящих из числовых статистических величин, информация включает в себя другие, не поддающиеся непосредственному измерению величины, например, предположения о возможных решениях и их результатах. Практика показывает, что основные трудности, возникающие при поиске и выборе деловых решений, обусловлены, прежде всего, недостаточно высоким качеством и неполнотой имеющейся информации .
Основные трудности, связанные с информацией, возникающие при выработке сложных решений, можно подразделить на следующие группы.
Во-первых, исходная статистическая информация зачастую бывает недостаточно достоверной.
Во-вторых, некоторая часть информации имеет качественный характер и не поддается количественной оценке. Так, нельзя точно рассчитать степень влияния социальных и политических факторов на реализацию планов, оценить экономический эффект будущих изобретений и т.д. Но, поскольку эти факторы и явления оказывают существенное влияние на результаты решений, их нельзя не учитывать.
В-третьих, в процессе подготовки решений часто возникают ситуации, когда в принципе необходимую информацию получить можно, однако в момент принятия решения она отсутствует, поскольку это связано с большими затратами времени или средств.
В-четвертых, существует большая группа факторов, которые могут повлиять на реализацию решения в будущем, но их нельзя точно предсказать .
В-пятых, одна из наиболее существенных трудностей при выборе решений состоит в том, что любая научная или техническая идея содержит в себе потенциальную возможность различных схем ее реализации, а любое экономическое действие может приводить к многочисленным исходам. Проблема выбора наилучшего варианта решения может возникнуть и потому, что обычно существуют ограничения в ресурсах, а следовательно, принятие одного варианта всегда связано с отказом от других решений.
В-шестых, при выборе наилучшего решения мы нередко сталкиваемся с многозначностью обобщенного критерия, на основе которого можно произвести сравнение возможных исходов. Многозначность, многомерность и качественное различие показателей являются серьезным препятствием для получения обобщенной оценки относительной эффективности, важности, ценности или полезности каждого из возможных решений.
В связи с этим одна из главных особенностей решения сложных проблем состоит в том, что применение расчетов здесь всегда переплетается с использованием суждений руководителей, ученых, специалистов. Эти суждения позволяют хотя бы частично компенсировать недостаток информации, полнее использовать индивидуальный и коллективный опыт, учесть предположения специалистов о будущих состояниях объектов. Закономерность развития науки и техники состоит в том, что новые знания, научно-техническая информация накапливаются в течение длительного периода времени. Нередко это накопление идет в скрытой форме в сознании ученых и разработчиков. Они, как никто другой, способны оценить перспективы той области, в которой работают, и предвидеть характеристики тех систем, в создании которых непосредственно участвуют.
Опыт показывает, что использование несистематизированных суждений отдельных специалистов оказывается при решении многих сложных научных и технических проблем недостаточно эффективным вследствие многообразия взаимосвязей между основными элементами таких проблем и невозможности охвата их всех. При использовании традиционных процедур подготовки решений нередко не удается рассмотреть широкий диапазон факторов, учесть весь спектр альтернативных путей решения проблем.
Все это заставляет прибегать к комплектованию групп специалистов, представляющих в качестве экспертов различные области знаний. Применение групповой экспертизы позволяет не только рассмотреть множество аспектов и факторов, но и объединить различные подходы, с помощью которых руководитель находит наилучшее решение.

2. ОРГАНИЗАЦИЯ ЭКСПЕРТНОГО ОЦЕНИВАНИЯ

2.1. Подбор и опрос экспертов

Для реализации процедуры экспертного оценивания необходимо сформировать группу экспертов. По Д. Уотермену, эксперт (англ. domain expert - знаток, специалист в области, сфере деятельности) - человек, который за годы обучения и практики научился чрезвычайно эффективно решать задачи, относящиеся к конкретной предметной области . Общим требованием при формировании группы экспертов является эффективное решение проблемы экспертизы. Эффективность решения проблемы определяется характеристиками достоверности экспертизы и затрат на нее. Достоверность группового экспертного оценивания зависит от общего числа экспертов в группе, долевого состава различных специалистов в группе, от характеристик экспертов.
Определение характера зависимости достоверности от перечисленных факторов является еще одной проблемой процедуры подбора экспертов.
Сложной проблемой процедуры подбора является формирование системы характеристик эксперта, существенно влияющих на ход и результаты экспертизы. Эти характеристики должны описывать специфические свойства специалиста и возможные отношения между людьми, влияющие на экспертизу. Важным требованием к характеристикам эксперта является измеримость этих характеристик. Еще одной проблемой является организация процедуры подбора экспертов, т.е. определение четкой последовательности работ, выполняемых в процессе подбора экспертов и необходимых ресурсов для их реализации.
Первым шагом при подборе экспертов является определение количественного состава экспертной группы. Для каждой задачи этот вопрос решается, как правило, отдельно. Число экспертов должно быть достаточно большим для того, чтобы они в совокупности могли учесть существенные свойства задачи и чтобы решение, найденное при их помощи, было достаточно точным. Однако при слишком большом количестве экспертов их мнения становятся несогласованными (за счет экспертов низкой квалификации), возникают трудности в организации экспертизы. С учетом этого целесообразно включать в группу от 10 до 20 человек, хотя возможны отклонения, как в большую, так и в меньшую сторону .Максимальное число экспертов в группе проверяется на ограничение по финансовым ресурсам. Определив зависимость между достоверностью, количеством экспертов и расходами на оплату, группа управления представляет руководству эту информацию и формулирует возможные альтернативы решений. Такими альтернативами могут быть либо снижение достоверности результатов экспертного оценивания до уровня, обеспечивающего выполнение ограничения по расходам на оплату экспертов, либо сохранение исходного требования на достоверность экспертизы и увеличение расходов на оплату экспертов.
Когда численность экспертной группы определена, переходят непосредственно к подбору экспертов. Для этого определяют круг решаемых задач и составляют список лиц, наиболее компетентных в рассматриваемой области. Для составления списка экспертов можно предложить следующую итеративную процедуру.
Первоначально отобранным экспертам предоставляют список вопросов, на которые в процессе проведения экспертизы должны быть получены ответы, и просят рекомендовать специалистов, способных дать заключение по представленным вопросам. Затем список вопросов предоставляется каждому из названных специалистов, которые в свою очередь также называют людей, компетентных в вопросах данного списка, и т.д. Этот процесс заканчивается, как только перестают называться новые специалисты. Такая процедура позволяет составить достаточно полный список компетентных лиц.
Помимо компетентности, хороший эксперт должен обладать целым рядом качеств. Основными из них являются:
- креативность - способность решать задачи, метод, решения которых полностью или частично неизвестен;
- эвристичностъ - способность выявлять неочевидные проблемы;
- интуиция - способность угадывать решение без его обоснования;
- предикатность - способность предсказывать или предчувствовать будущее решение;
- независимость - способность противостоять мнению большинства;
- всесторонность - способность видеть проблему с разных точек зрения.
Требования, предъявляемые к экспертам, зависят также от метода организации экспертизы. Так, при работе эксперта в комиссии, где эксперты вступают в непосредственный контакт друг с другом, важное значение приобретают психологические факторы . Часто специфические требования к эксперту непосредственно вытекают из формы организации и проведения экспертизы.
Как правило, для отбора экспертов из составленного списка используют тестирование. Тест состоит в следующем: эксперту предлагается ответить в письменной форме на ряд вопросов, с тем, чтобы проверить его знания в области проводимой экспертизы и выявить наличие у него качеств, перечисленных выше. В таких тестах может применяться самооценка, т.е. эксперту предлагается самому оценить свои знания (например, по пятибалльной шкале) по каждому вопросу текста. Для обработки и составления таких тестов привлекаются специалисты из области психологии.
При подборе экспертов следует учитывать их заинтересованность в том или ином результате экспертизы . Наиболее благоприятным является тот случай, когда эксперту безразличен конечный результат экспертизы. Это способствует его большей объективности.
и т.д.................

 

Возможно, будет полезно почитать: