Классический метод экспертных оценок Дельфи

 

 

Титульный лист

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

Содержание

Введение  . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .3

1. Экспертные методы оценок и их виды. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5

2. Роль экспертов в управлении . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 7

3. Метод экспертных оценок   . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 10

3.1. Организация экспертного оценивания . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13

3.2. Подбор экспертов . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 15

3.3. Опрос экспертов  . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .17

4. Классический метод экспертных оценок Дельфи . . . . . . . . . . . . . . . . . . . . 19 Заключение.. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 23

Список используемой литературы . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 25

 

 

 

 

 

 

 

 

 

 

 

 

 

 

Введение

Процессы  принятия  решений,  понимаемые  как выбор одной из нескольких возможных альтернатив, пронизывают  всю человеческую жизнь. Большинство  решений  мы принимаем не задумываясь,  так как существует автоматизм поведения,  выработанный многолетней практикой. Есть решения,  которым мы придаем малое значение, и поэтому мало задумываемся при осуществлении выбора. И,  наконец, существуют проблемы выбора,  решая которые, человек испытывает мучительные раздумья.                 

Выработка и принятие решения – узловая процедура в деятельности руководителя, которая определяет весь дальнейший ход процесса управления, в особенности конечный результат управленческой деятельности. Вопросы совершенствования методов управления приобретают сейчас очень важное значение, поскольку именно в этой сфере имеются еще большие резервы роста эффективности народного хозяйства.    Бесспорно то, что для принятия обоснованных решений необходимо опираться на опыт, знания и интуицию специалистов.  В связи с этим все шире используются экспертные методы, под которыми понимают комплекс логических и математико-статистических методов и процедур, направленных на получение от специалистов информации, необходимой для подготовки и выбора рациональных решений.     

Экспертные  методы применяют сейчас в ситуациях, когда выбор, обоснование и оценка последствий решений не могут  быть выполнены на основе точных расчетов. Экспертиза позволяет обойти трудности долгосрочного учета качественных изменений объекта прогнозирования, связанных как с внутренней логикой его развития (взаимосвязей качественных признаков), так и с изменениями внешних факторов (фона). Например, влияние развития науки, техники и технологии на макроэкономические показатели в целом по стране и по отраслям, а также различных экономических ограничений (инвестиций частного сектора, потребности в продукции и услугах и тому подобное) учитывается в основном экспертными методами. Применение  экспертных методов обеспечивает активное и целенаправленное участие специалистов на всех этапах принятия решений, что позволяет существенно повысить их качество и эффективность. Таким образом, данная проблема является чрезвычайно актуальной.

Предметом исследования данной работы является теория менеджмента, включающая в себя теорию принятия управленческих решений. Объект исследования - экспертные методы, рассматриваемые как совокупность процедур направленных на получение информации для выбора оптимального решения. Целью данной работы является изучение экспертных методов принятия решений.  Достижение  данной цели предполагает решение следующих  задач:

- изучение роли экспертизы в управлении;

- рассмотрение порядка  организации экспертного оценивания;

- исследование основных  методов экспертного оценивания. 

Методы экспертных оценок помимо множества преимуществ имеют ряд недостатков:

- часть специалистов экспертной  группы (или даже один наиболее  активный член группы) могут оказать  давление на остальных экспертов, и, если их (его) мнение ошибочно, может быть получен неправильный  прогноз;

- отрицательное влияние  на решения членов экспертной  группы в отдельных случаях  может оказать не глубина доводов, а количество замечаний «за»  и «против»;

- возможно также, что проблема достижения соглашения между членами экспертной группы будет иметь более важное значение, чем тщательно разработанный прогноз. Несмотря на отмеченные недостатки, методы экспертных оценок, тем не менее, остаются важнейшим и наиболее надежным способом планирования и прогнозирования.

1. Экспертные методы оценок  и их виды

Эффективность деятельности организаций, компаний, холдингов, народного хозяйства в целом в значительной степени зависит от исследования создаваемых систем управления, их рационального построения и необходимых при этом инвестиций. Существует ряд методов исследования и оценки эффективности систем управления. Экспертные методы представляют собой точки зрения (мнения, суждения) высококвалифицированных специалистов в определенных предметных областях - экспертов, сформулированные в виде оценок объекта в содержательной, качественной или количественной форме [1].

 Экспертные методы  широко используются при синтезе  процессов управления сложных  систем, в менеджменте, при разработке  и принятии решений, для получения  различного вида оценок. Например, качества труда, надежности банка, ситуаций на финансовых рынках, исследовании систем управления  и других случаях.

 Спектр экспертных  методов, используемых в прогнозировании, достаточно широк. К группе экспертных  методов относят:

- метод индивидуальных экспертных оценок;

- метод коллективных экспертных оценок.

 Экспертные методы  разделяются на два подкласса:

1. Прямые экспертные оценки  строятся по принципу получения  и обработки независимого обобщенного  мнения коллектива экспертов (или  одного из них) при отсутствии  воздействия на взгляд каждого  из них суждения другого эксперта  и всего коллектива.

2. Экспертные оценки с  обратной связью в том или  ином виде реализуют принцип  обратной связи посредством воздействия  на оценку экспертной группы (одного  эксперта) мнениями, полученными ранее  от этой группы (или от одного  из экспертов).

 Экспертные методы  в прогнозировании используются  в следующих случаях:

- при отсутствии достаточно  представительной и достоверной  статистической характеристики  объекта;

- в случае большой  неопределенности среды функционирования объектов тех отраслей промышленности, которые подвержены сильному влиянию новых открытий;

- при дефиците времени  или в экстремальных ситуациях.

 Широкое применение  экспертные оценки находят при  прогнозировании основных направлений  научно-технического прогресса, общественной  и политической сфер деятельности. Экспертные оценки применяются  как для поискового, так и нормативного  прогнозирования. Широко используются  методы в долгосрочном прогнозировании, так как они не предъявляют  к исходной информации требований, характерных для экономических  моделей1.

 Методы коллективных экспертных оценок имеют преимущество перед методами индивидуальных экспертных оценок, так как при коллективном мышлении выше точность прогнозов, и кроме того, при обработке различных индивидуальных независимых оценок экспертов часто возникают продуктивные идеи (народная мудрость гласит: «Одна голова – хорошо, а две и больше – лучше»). Так, исследования эффективности коллективных экспертных оценок, проведенные в университете Буффало, показали, что групповое мышление производит на 70% больше ценных новых идей, чем сумма результатов индивидуальных мышлении.

 

 

 

 

 

 

2. Роль экспертов в  управлении

 Современное общество  развивается под постоянно усиливающимся  воздействием научно-технической  революции, которая вызывает коренные  преобразования в производстве, глубокие изменения в структуре  и экономике народного хозяйства. Особое значение в управлении  сейчас приобретают методы оптимизации, основанные на применении формальных, чаще всего математических моделей, обеспечивающих экономию времени  и средств при решении многих практических задач. Построение моделей помогает привести сложные и подчас неопределенные факторы, связанные с проблемой принятия решений, в логически стройную схему, определить, какие данные необходимы для оценки и выбора альтернатив.

 В процессе управления  возникает естественное стремление  к отысканию решения, которое  объективно является наилучшим  из всех возможных. В качестве  инструмента оптимизации сейчас  широко используется математическое  программирование. Однако, формализация технико-экономических и управленческих решений осложняется рядом особенностей. Жизнь общества настолько сложна, что трудно рассчитывать на появление моделей, которые полностью отражали бы природу и количественные взаимосвязи социально-экономических процессов. Реальная действительность всегда сложнее самых тонких математических моделей, а ее развитие часто опережает формальное познание. Задачи управления требуют в качестве неотъемлемого элемента решения участия людей. И, наконец, сам процесс управления всегда предполагает ориентацию не только на числовые данные, но и на обычный здравый смысл. Использование математического программирования и вычислительной техники позволяет принимать решения, основанные на более полной и надежной информации. Но, несомненно и то, что при любых условиях для выбора рационального решения требуется нечто большее, чем хорошая математическая модель [3] .

 Принимая решения, мы  обычно предполагаем, что информация, используемая для их обоснования, достоверно и надежна. Но для  многих экономических и научно-технических задач, являющихся по своему характеру качественно новыми и неповторяющимися, это предположение либо заведомо не реализуется, либо в момент принятия решения его не удается доказать.

Основные трудности, связанные с информацией, возникающие при выработке сложных решений, можно подразделить на следующие группы[1] .

 Во-первых, исходная статистическая  информация зачастую бывает недостаточно  достоверной.

 Во-вторых, некоторая  часть информации имеет качественный  характер и не поддается количественной  оценке. Так, нельзя точно рассчитать  степень влияния социальных и  политических факторов на реализацию  планов, оценить экономический эффект  будущих изобретений и т.д. Но, поскольку эти факторы и явления  оказывают существенное влияние  на результаты решений, их нельзя  не учитывать.

 В-третьих, в процессе  подготовки решений часто возникают  ситуации, когда в принципе необходимую  информацию получить можно, однако  в момент принятия решения  она отсутствует, поскольку это  связано с большими затратами  времени или средств.

 В-четвертых, существует  большая группа факторов, которые  могут повлиять на реализацию  решения в будущем, но их нельзя  точно предсказать.

 В-пятых, одна из наиболее  существенных трудностей при  выборе решений состоит в том, что любая научная или техническая  идея содержит в себе потенциальную  возможность различных схем ее  реализации, а любое экономическое  действие может приводить к  многочисленным исходам. Проблема  выбора наилучшего варианта решения  может возникнуть и потому, что  обычно существуют ограничения  в ресурсах, а следовательно, принятие одного варианта всегда связано с отказом от других решений.

 В-шестых, при выборе  наилучшего решения мы нередко  сталкиваемся с многозначностью  обобщенного критерия, на основе  которого можно произвести сравнение  возможных исходов. Многозначность, многомерность и качественное различие показателей являются серьезным препятствием для получения обобщенной оценки относительной эффективности, важности, ценности или полезности каждого из возможных решений.

 В связи с этим  одна из главных особенностей  решения сложных проблем состоит  в том, что применение расчетов  здесь всегда переплетается с  использованием суждений руководителей, ученых, специалистов. Эти суждения  позволяют хотя бы частично  компенсировать недостаток информации, полнее использовать индивидуальный  и коллективный опыт, учесть предположения  специалистов о будущих состояниях  объектов. Закономерность развития  науки и техники состоит в  том, что новые знания, научно-техническая  информация накапливаются в течение  длительного периода времени. Нередко  это накопление идет в скрытой  форме в сознании ученых и  разработчиков. Они, как никто другой, способны оценить перспективы  той области, в которой работают, и предвидеть характеристики  тех систем, в создании которых  непосредственно участвуют.

 Опыт показывает, что  использование несистематизированных  суждений отдельных специалистов  оказывается при решении многих  сложных научных и технических  проблем недостаточно эффективным  вследствие многообразия взаимосвязей  между основными элементами таких  проблем и невозможности охвата  их всех. При использовании традиционных  процедур подготовки решений  нередко не удается рассмотреть  широкий диапазон факторов, учесть  весь спектр альтернативных путей  решения проблем.

 Все это заставляет  прибегать к комплектованию групп  специалистов, представляющих в  качестве экспертов различные  области знаний. Применение групповой  экспертизы позволяет не только  рассмотреть множество аспектов  и факторов, но и объединить  различные подходы, с помощью  которых руководитель находит  наилучшее решение.

 

3. Метод экспертных оценок

 Сущность метода экспертных  оценок заключается в проведении  экспертами интуитивно-логического  анализа проблемы с количественной  оценкой суждений и формальной  обработкой результатов. Получаемое  в результате обработки обобщенное  мнение экспертов принимается  как решение проблемы. Комплексное  использование интуиции (неосознанного  мышления), логического мышления  и количественных оценок с  их формальной обработкой позволяет  получить эффективное решение  проблемы[4] .

 При выполнении своей  роли в процессе управления  эксперты производят две основные  функции: формируют объекты (альтернативные  ситуации, цели, решения и т. п.) и  производят измерение их характеристик (вероятности свершения событий, коэффициенты значимости целей, предпочтения решений и т. п.).

 Формирование объектов  осуществляется экспертами на  основе логического мышления  и интуиции. При этом большую  роль играют знания и опыт  эксперта. Измерение характеристик объектов требует от экспертов знания теории измерений.

 Характерными особенностями  метода экспертных оценок как  научного инструмента решения  сложных не формализуемых проблем являются, во-первых, научно обоснованная организация проведения всех этапов экспертизы, обеспечивающая наибольшую эффективность работы на каждом из этапов, и, во-вторых, применение количественных методов как при организации экспертизы, так и при оценке суждений экспертов и формальной групповой обработке результатов. Эти две особенности отличают метод экспертных оценок от обычной давно известной экспертизы, широко применяемой в различных сферах человеческой деятельности.

Все множество плохо формализуемых проблем условно можно разделить на два класса. К первому классу относятся проблемы, в отношении которых имеется достаточный информационный потенциал, позволяющий успешно решать эти проблемы. Основные трудности в решении проблем первого класса при экспертной оценке заключаются в реализации существующего информационного потенциала путем подбора экспертов, построения рациональных процедур опроса и применения оптимальных методов обработки его результатов. При этом методы опроса и обработки основываются на использовании принципа «хорошего» измерителя. Данный принцип означает, что выполняются следующие гипотезы:

1) эксперт является хранилищем  большого объема рационально  обработанной информации, и поэтому  он может рассматриваться как  качественный источник информации;

2) групповое мнение экспертов  близко к истинному решению  проблемы.

 Если эти гипотезы  верны, то для построения процедур  опроса и алгоритмов обработки  можно использовать результаты  теории измерений и математической  статистики.

 Ко второму классу  относятся проблемы, в отношении  которых информационный потенциал  знаний недостаточен для уверенности  в справедливости указанных гипотез. При решении проблем из этого  класса экспертов уже нельзя  рассматривать как «хороших измерителей». Поэтому необходимо очень осторожно  проводить обработку результатов экспертизы. 

 Применение методов  осреднения, справедливых для «хороших  измерителей», в данном случае  может привести к большим ошибкам. Например, мнение одного эксперта, сильно отличающееся от мнений  остальных экспертов, может оказаться  правильным. В связи с этим  для проблем второго класса  в основном должна применяться  качественная обработка.

 Область применения  метода экспертных оценок весьма  широка. Перечислим типовые задачи, решаемые методом экспертных  оценок[1] :

1) составление перечня  возможных событий в различных  областях за определенный промежуток  времени;

2) определение наиболее  вероятных интервалов времени  свершения совокупности событий;

3) определение целей и  задач управления с упорядочением  их по степени важности;

4) определение альтернативных (вариантов решения задачи с  оценкой их предпочтения;

5) альтернативное распределение  ресурсов для решения задач  с оценкой их предпочтительности;

6) альтернативные варианты  принятия решений в определенной  ситуации с оценкой их предпочтительности.

 Для решения перечисленных  типовых задач в настоящее  время применяются различные  разновидности метода экспертных  оценок. К основным видам относятся: анкетирование и интервьюирование; мозговой штурм; дискуссия; совещание; оперативная игра; сценарий[1] .

 Каждый из этих видов  экспертного оценивания обладает  своими преимуществами и недостатками, определяющими рациональную область  применения. Во многих случаях  наибольший эффект дает комплексное  применение нескольких видов  экспертизы2.

 Анкетирование и сценарий  предполагают индивидуальную работу  эксперта. Интервьюирование может  осуществляться как индивидуально, так и с группой экспертов. Остальные виды экспертизы предполагают  кол- лективное участие экспертов в работе. Независимо от индивидуального или группового участия экспертов в работе целесообразно получать информацию от множества экспертов. При использовании метода экспертных оценок возникают свои проблемы. Основными из них являются: подбор экспертов, проведение опроса экспертов, обработка результатов опроса, организация процедур экспертизы.

 

 

3. 1. Организация экспертного  оценивания

Первым этапом организации работ по применению экспертного оценивания является подготовка и издание руководящего документа, в котором формулируется цель работы и основные положения по ее выполнению. В этом документе должны быть отражены следующие вопросы: постановка задачи- эксперимента; цели эксперимента; обоснование необходимости эксперимента; сроки выполнения работ; задачи и состав группы управления; обязанности и права группы; финансовое и материальное обеспечение работ [2].

Для подготовки этого документа, а также для руководства всей работой назначается руководитель экспертизы. На него возлагается формирование группы управления и ответственность за организацию ее работы.

 После формирования  группа управления осуществляет  работу по подбору экспертной  группы примерно в такой последовательности: уяснение решаемой проблемы; определение  круга областей деятельности, связанных  с проблемой; определение долевого  состава экспертов по каждой  области деятельности; определение  количества экспертов в группе; составление предварительного списка  экспертов с учетом их местонахожде ния; анализ качеств экспертов и уточнение списка экспертов в группе; получение согласия экспертов на участие в работе; составление окончательного списка экспертной группы.

 Параллельно с процессом  формирования группы экспертов  группа управления проводит разработку  организации и методики проведения  опроса экспертов. При этом решаются  следующие вопросы: место и время  проведения опроса; количество и  задачи туров опроса; форма проведения  опроса; порядок фиксации и сбора  результатов опроса; состав необходимых  документов.

 Следующим этапом работы  группы управления является определение  организации и методики обработки  данных опроса. На данном этапе  необходимо определить задачи и сроки обработки, процедуры и алгоритмы обработки, силы и средства для проведения обработки.

 В процессе непосредственного  проведения опроса экспертов  и обработки его результатов  группа управления осуществляет  выполнение комплекса работ в  соответствии с разработанным  планом, корректируя его по мере  необходимости по содержанию, срокам  и обеспечению ресурсами3.

 Последним этапом работ  для группы управления является  оформление результатов работы. На этом этапе производится  анализ результатов экспертного  оценивания; составление отчета; обсуждение  и одобрение результатов; представление  итогов работы на утверждение; ознакомление с результатами  экспертизы организаций и лиц.

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

3.2. Подбор экспертов

Для реализации процедуры экспертного оценивания необходимо сформировать группу экспертов. Общим требованием при формировании группы экспертов является эффективное решение проблемы экспертизы. Эффективность решения проблемы определяется характеристиками достоверности экспертизы и затрат на нее [5].

 Достоверность экспертного  оценивания может быть определена  только на основе практического  решения проблемы и анализа  ее результатов. Использование экспертов  как раз и обусловлено тем, что отсутствуют какие-либо другие  способы получения информации. Поэтому  оценка достоверности экспертизы  может осуществляться, как правило, только по апостериорным (послеопытным) данным. Если экспертиза проводится систематически с примерно одним и тем же составам экспертов, то появляется возможность накопления статистических данных по достоверности работы группы экспертов и получения устойчивой числовой оценки достоверности. Эту оценку можно использовать в качестве априорных данных о достоверности группы экспертов для последующих экспертиз.

 Достоверность группового  экспертного оценивания зависит  от общего числа экспертов  в группе, долевого состава различных  специалистов в группе, от характеристик  экспертов. Определение характера зависимости достоверности от перечисленных факторов является еще одной проблемой процедуры подбора экспертов.

 Сложной проблемой  процедуры подбора является формирование  системы характеристик эксперта, существенно влияющих на ход  и результаты экспертизы. Эти  характеристики должны описывать  специфические свойства специалиста  и возможные отношения между  людьми, влияющие на экспертизу.

Максимальное число экспертов в группе проверяется на ограничение по финансовым ресурсам. Определив зависимость между достоверностью, количеством экспертов и расходами на оплату, группа управления представляет руководству эту информацию и формулирует возможные альтернативы решений.

 Такими альтернативами  могут быть либо снижение достоверности  результатов экспертного оценивания  до уровня, обеспечивающего выполнение  ограничения по расходам на  оплату экспертов, либо сохранение  исходного требования на достоверность  экспертизы и увеличение расходов  на оплату экспертов.

 Следующим этапом работы  по подбору экспертов является  составление предварительного списка  экспертов. При составлении этого  списка проводится анализ качеств  экспертов. Кроме учета качеств  экспертов, определяются их местонахождение  и возможности участия выбранных  специалистов в экспертизе. При  оценке качеств учитывается мнение  людей, хорошо знающих кандидатов  в эксперты.

 После составления  списка экспертов им направляются  письма с приглашением участвовать  в экспертизе. В письмах объясняется  цель проведения экспертизы, ее  сроки, порядок проведения, объем  работы и условия вознаграждения. К письмам прилагаются анкеты  данных эксперта и самооценки  компетентности.

 Получив ответы экспертов, группа управления составляет  окончательный список группы  экспертов. После составления и  утверждения списка экспертам  посылается сообщение о включении  их в состав экспертной группы. Если экспертное оценивание производится  методом анкетирования, то одновременно  с уведомлением о включении  в экспертную группу всем экспертам  высылается анкета с необходимыми  инструкциями для их заполнения. Сообщением экспертам о включении  их в экспертизу заканчивается  работа по подбору экспертов4.

 

 

 

3.3. Опрос экспертов

 Опрос – главный  этап совместной работы группы  управления и экспертов. Основным содержанием опроса является[1] :

- постановка задачи и  предъявление вопросов экспертам;

- информационное обеспечение  работы экспертов;

- выработка экспертами  суждений, оценок, предложений;

- сбор результатов работы экспертов.

Можно назвать три типа задач, которые решаются в процессе опроса:

- оценка качественная  или количественная заданных  объектов;

- построение новых объектов;

- построение и оценка  новых объектов.

 При коллективной экспертизе  используются следующие основные  виды опроса: дискуссия, анкетирование  и интервьюирование, метод коллективной  генерации идей, или мозговой  штурм.

 Анкетирование может  проводиться с обратной связью  или без нее. При анкетировании  с обратной связью опрос экспертов  производится в несколько этапов  с доведением до сведения экспертов  некоторых результатов опроса  на предыдущем этапе, включая  оценки отдельных экспертов и  их аргументацию.

 Главным в организации  опроса является обеспечение  максимума информации и максимума  творческой активности, самостоятельности  эксперта. Необходимо стремиться  довести до каждого эксперта  по возможности всю информацию, относящуюся к анализируемому  явлению, которой располагают как  эксперты, так и организаторы  опроса, не лишая в то же  время эксперта творческой самостоятельности  и активности.

Классический метод экспертных оценок Дельфи