Метод экспертных оценок. 7

Содержание 

1. Введение……………………………………………………………….3
2. Метод экспертных оценок…………………….………………….......4
3. Организация экспертного оценивания………..……………………..7
4. Подбор экспертов……………………………………………………..8
5. Опрос экспертов……………………………………………….……..10
6. Примеры применения метода экспертных оценок…………...……12
7. Заключение……………………………………………….…………..14
8. Список литературы………………………………………………..…16

Введение

     Современная экономика предъявляет новые, более  высокие требования к управлению. Вопросы совершенствования методов управления приобретают сейчас очень важное значение, поскольку именно в этой сфере имеются еще большие резервы роста эффективности народного хозяйства.

     Существенным  фактором повышения научного уровня управления является применение при подготовке решений математических методов и моделей. Однако, полная математическая формализация технико-экономических задач часто неосуществима вследствие их качественной новизны и сложности. В связи с этим все шире используются экспертные методы, под которыми понимают комплекс логических и математико-статистических методов и процедур, направленных на получение от специалистов информации, необходимой для подготовки и выбора рациональных решений.

     Экспертные  методы применяют сейчас в ситуациях, когда выбор, обоснование и оценка последствий решений не могут быть выполнены на основе точных расчетов. Такие ситуации нередко возникают при разработке современных проблем управления общественным производством и, особенно, при прогнозировании и долгосрочном планировании. В последние годы экспертные оценки находят широкое применение в социально-политическом и научно-техническом прогнозировании, в планировании народного хозяйства, отраслей, объединений, в разработке крупных научно-технических, экономических и социальных программ, в решении отдельных проблем управления.

     Применение  экспертных методов обеспечивает активное и целенаправленное участие специалистов на всех этапах принятия решений, что  позволяет существенно повысить их качество и эффективность.

     Целью данной работы является изучение метода экспертных оценок, а именно роли экспертизы в управлении, порядка организации  экспертного оценивания, видов шкал и порядка их использования.

  Метод экспертных оценок

     Сущность  метода экспертных оценок заключается в проведении экспертами интуитивно-логического анализа проблемы с количественной оценкой суждений и формальной обработкой результатов. Получаемое в результате обработки обобщенное мнение экспертов принимается как решение проблемы. Комплексное использование интуиции (неосознанного мышления), логического мышления и количественных оценок с их формальной обработкой позволяет получить эффективное решение проблемы.

     При выполнении своей роли в процессе управления эксперты производят две  основные функции: формируют объекты (альтернативные ситуации, цели, решения и т. п.) и производят измерение их характеристик (вероятности свершения событий, коэффициенты значимости целей, предпочтения решений и т. п.). Формирование объектов осуществляется экспертами на основе логического мышления и интуиции. При этом большую роль играют знания и опыт эксперта. Измерение характеристик объектов требует от экспертов знания теории измерений.

     Характерными  особенностями метода экспертных оценок как научного инструмента решения сложных неформализуемых проблем являются, во-первых, научно обоснованная организация проведения всех этапов экспертизы, обеспечивающая наибольшую эффективность работы на каждом из этапов, и, во-вторых, применение количественных методов как при организации экспертизы, так и при оценке суждений экспертов и формальной групповой обработке результатов. Эти две особенности отличают метод экспертных оценок от обычной давно известной экспертизы, широко применяемой в различных сферах человеческой деятельности.

     В настоящее время в нашей стране и за рубежом метод экспертных оценок широко применяется для решения важных проблем различного характера. В различных отраслях, объединениях и на предприятиях действуют постоянные или временные экспертные комиссии, формирующие решения по различным сложным неформализуемым проблемам.

     Все множество плохо формализуемых  проблем условно можно разделить на два класса. К первому классу относятся проблемы, в отношении которых имеется достаточный информационный потенциал, позволяющий успешно решать эти проблемы. Основные трудности в решении проблем первого класса при экспертной оценке заключаются в реализации существующего информационного потенциала путем подбора экспертов, построения рациональных процедур опроса и применения оптимальных методов обработки его результатов. При этом методы опроса и обработки основываются на использовании принципа «хорошего» измерителя. Данный принцип означает, что выполняются следующие гипотезы:

1) эксперт  является хранилищем большого  объема рационально обработанной информации, и поэтому он может рассматриваться как качественный источник информации;

2) групповое  мнение экспертов близко к  истинному решению проблемы.

     Если  эти гипотезы верны, то для построения процедур опроса и алгоритмов обработки можно использовать результаты теории измерений и математической статистики.

     Ко  второму классу относятся проблемы, в отношении которых информационный потенциал знаний недостаточен для  уверенности в справедливости указанных  гипотез. При решении проблем из этого класса экспертов уже нельзя рассматривать как «хороших измерителей». Поэтому необходимо очень осторожно проводить обработку результатов экспертизы. Применение методов осреднения, справедливых для «хороших измерителей», в данном случае может привести к большим ошибкам. Например, мнение одного эксперта, сильно отличающееся от мнений остальных экспертов, может оказаться правильным. В связи с этим для проблем второго класса в основном должна применяться качественная обработка.

Область применения метода экспертных оценок весьма широка. Существует несколько типовых задач, решаемых методом экспертных оценок:

     1) составление перечня возможных  событий в различных областях за определенный промежуток времени;

     2) определение наиболее вероятных  интервалов времени свершения совокупности событий;

     3) определение целей и задач  управления с упорядочением их по степени важности;

     4) определение альтернативных (вариантов  решения задачи с оценкой их предпочтения;

     5) альтернативное распределение ресурсов для решения задач с оценкой их предпочтительности;

     6) альтернативные варианты принятия  решений в определенной ситуации с оценкой их предпочтительности.

     Для решения перечисленных типовых  задач в настоящее время применяются различные разновидности метода экспертных оценок. К основным видам относятся: анкетирование и интервьюирование; мозговой штурм; дискуссия; совещание; оперативная игра; сценарий.

     Каждый  из этих видов экспертного оценивания обладает своими преимуществами и недостатками, определяющими рациональную область применения. Во многих случаях наибольший эффект дает комплексное применение нескольких видов экспертизы.

     Анкетирование и сценарий предполагают индивидуальную работу эксперта. Интервьюирование может осуществляться как индивидуально, так и с группой экспертов. Остальные виды экспертизы предполагают коллективное участие экспертов, в работе. Независимо от индивидуального или группового участия экспертов в работе целесообразно получать информацию от множества экспертов. Это позволяет получить на основе обработки данных более достоверные результаты, а также новую информацию о зависимости явлений, событий, фактов, суждений экспертов, не содержащуюся в явном виде в высказываниях экспертов.

Организация экспертного оценивания

     Первым  этапом организации работ по применению экспертного оценивания является подготовка и издание руководящего документа, в котором формулируется цель работы и основные положения по ее выполнению. В этом документе должны быть отражены следующие вопросы: постановка задачи-эксперимента; цели эксперимента; обоснование необходимости эксперимента; сроки выполнения работ; задачи и состав группы управления; обязанности и права группы; финансовое и материальное обеспечение работ.

     Для подготовки этого документа, а также для руководства всей работой назначается руководитель экспертизы. На него возлагается формирование группы управления и ответственность за организацию ее работы.

     После формирования группа управления осуществляет работу по подбору экспертной группы примерно в такой последовательности: уяснение решаемой проблемы; определение круга областей деятельности, связанных с проблемой; определение долевого состава экспертов по каждой области деятельности; определение количества экспертов в группе; составление предварительного списка экспертов с учетом их местонахождения; анализ качеств экспертов и уточнение списка экспертов в группе; получение согласия экспертов на участие в работе; составление окончательного списка экспертной группы.

     Параллельно с процессом формирования группы экспертов группа управления проводит разработку организации и методики проведения опроса экспертов. При этом решаются следующие вопросы: место и время проведения опроса; количество и  задачи туров опроса; форма проведения опроса; порядок фиксации и сбора результатов опроса; состав необходимых документов.

     Вторым  этапом работы группы управления является определение организации и методики обработки данных опроса. На данном этапе необходимо определить  задачи и сроки обработки, процедуры и алгоритмы обработки, силы и средства для проведения обработки.

     В процессе непосредственного проведения опроса экспертов и обработки его результатов группа управления осуществляет выполнение комплекса работ в соответствии с разработанным планом, корректируя его по мере необходимости по содержанию, срокам и обеспечению ресурсами.

     Третьим этапом работ для группы управления является оформление результатов работы. На этом этапе производится анализ результатов экспертного оценивания; составление отчета; обсуждение и одобрение результатов; представление итогов работы на утверждение; ознакомление с результатами экспертизы организаций и лиц. 

  Подбор  экспертов

     Для реализации процедуры экспертного  оценивания необходимо сформировать группу экспертов. Общим требованием при формировании группы экспертов является эффективное решение проблемы экспертизы. Эффективность решения проблемы определяется характеристиками достоверности экспертизы и затрат на нее.

     Достоверность экспертного оценивания может быть определена только на основе практического решения проблемы и анализа ее результатов. Использование экспертов как раз и обусловлено тем, что отсутствуют какие-либо другие способы получения информации. Поэтому оценка достоверности экспертизы может осуществляться, как правило, только по апостериорным (послеопытным)   данным.   Если экспертиза   проводится систематически с примерно одним и тем же составам экспертов, то появляется возможность накопления статистических данных по достоверности работы группы экспертов и получения устойчивой числовой оценки достоверности. Эту оценку можно использовать в качестве априорных данных о достоверности группы экспертов для последующих экспертиз.

     Достоверность группового экспертного оценивания зависит от общего числа экспертов в группе, долевого состава различных специалистов в группе, от характеристик экспертов.

     Определение характера зависимости достоверности  от перечисленных факторов является еще одной проблемой процедуры подбора экспертов.

     Сложной проблемой процедуры подбора  является формирование системы характеристик  эксперта, существенно влияющих на ход и результаты экспертизы. Эти характеристики должны описывать специфические свойства специалиста и возможные отношения между людьми, влияющие на экспертизу. Важным требованием к характеристикам эксперта является измеримость этих характеристик.

     Еще одной проблемой является организация  процедуры подбора экспертов, т.е. определение четкой последовательности работ, выполняемых в процессе подбора экспертов и необходимых ресурсов для их реализации.

     Максимальное  число экспертов в группе проверяется  на ограничение по финансовым ресурсам. Определив зависимость между достоверностью, количеством экспертов и расходами на оплату, группа управления представляет руководству эту информацию и формулирует возможные альтернативы решений. Такими альтернативами могут быть либо снижение достоверности результатов экспертного оценивания до уровня, обеспечивающего выполнение ограничения по расходам на оплату экспертов, либо сохранение исходного требования на достоверность экспертизы и увеличение расходов на оплату экспертов.

     Следующим этапом работы по подбору экспертов  является составление предварительного списка экспертов. При составлении этого списка проводится анализ качеств экспертов. Кроме учета качеств экспертов, определяются их местонахождение и возможности участия выбранных специалистов в экспертизе. При оценке качеств учитывается мнение людей, хорошо знающих кандидатов в эксперты.

     После составления списка экспертов им направляются письма с приглашением участвовать в экспертизе. В письмах объясняется цель проведения экспертизы, ее сроки, порядок проведения, объем работы и условия вознаграждения. К письмам прилагаются анкеты данных эксперта и самооценки компетентности. Получив ответы экспертов, группа управления составляет окончательный список группы экспертов.

     После составления и утверждения списка экспертам посылается сообщение  о включении их в состав экспертной группы. Если экспертное оценивание производится методом анкетирования, то одновременно с уведомлением о включении в экспертную группу всем экспертам высылается анкета с необходимыми инструкциями для их заполнения. Сообщением экспертам о включении их в экспертизу заканчивается работа по подбору экспертов.

  Опрос экспертов

     Опрос – главный этап совместной работы группы управления и экспертов. Основным содержанием опроса является:

  - постановка задачи и предъявление  вопросов экспертам;

  - информационное обеспечение работы экспертов;

  - выработка экспертами суждений, оценок, предложений;

  - сбор результатов работы экспертов.

     Можно назвать три типа задач, которые решаются в процессе опроса:

  1) оценка качественная или количественная заданных объектов;

  2) построение новых объектов;

  3) построение и оценка новых объектов.

     При коллективной экспертизе используются следующие основные виды опроса: дискуссия, анкетирование и интервьюирование, метод коллективной генерации идей, или мозговой штурм.

     Анкетирование может проводиться с обратной связью или без нее. При анкетировании с обратной связью опрос экспертов производится в несколько этапов с доведением до сведения экспертов некоторых результатов опроса на предыдущем этапе, включая оценки отдельных экспертов и их аргументацию.

     Главным в организации опроса является обеспечение  максимума информации и максимума  творческой активности, самостоятельности эксперта. Необходимо стремиться довести до каждого эксперта по возможности всю информацию, относящуюся к анализируемому явлению, которой располагают как эксперты, так и организаторы опроса, не лишая в то же время эксперта творческой самостоятельности и активности.

     Однако  возможности эксперта по переработке  информации ограниченны. В результате эксперт может принять решение, не используя всей информации, имеющейся в его распоряжении. Кроме того, новая информация воспринимается человеком с определенным внутренним сопротивлением и не сразу влияет на уже сложившиеся субъективные оценки. Отношение к новой информации благожелательнее, а восприятие и использование ее полнее, если она представляется в доходчивой, яркой и компактной форме.

     Из  этих психологических особенностей следует необходимость предоставления экспертам возможностей для фиксации поступающей информации путем ведения записей, использования технических средств, а также необходимость предварительной обработки информации и представления ее экспертам в наиболее воспринимаемой форме.

     Необходимо  подчеркнуть противоречивость значения обмена экспертами информацией, так как получение такой информации таит опасность потери творческой независимости в построении модели объекта экспертом. Разрешение этого противоречия в полной мере невозможно, и при каждой экспертизе ее организаторы должны находить разумный компромисс, прежде всего, путем выбора вида опроса, формы и степени общения экспертов.

     Каждый  из видов опроса имеет свои достоинства  и недостатки в построении обмена информацией между экспертами и  в организации их независимого творчества. Выбор того или иного вида опроса определяется многими факторами, из которых основными являются:

  - цель и задачи экспертизы;

  - существо и сложность анализируемой  проблемы;

  - полнота и достоверность исходной  информации;

  - требуемые объем и достоверность  информации, получаемой в результате опроса;

  - время, отведенное на опрос  и экспертизу в целом;

  - допустимая стоимость опроса, и  экспертизы в целом;

  - количество экспертов и членов  группы управления, их характеристики.

     Анкетирование является наиболее эффективным и  самым распространенным видом опроса, ибо позволяет наилучшим образом сочетать информационное обеспечение экспертов с их самостоятельным творчеством. 

Примеры применения метода экспертных оценок

     Экспертные  оценки бывают индивидуальные и коллективные.

     Индивидуальные  оценки - это оценки одного специалиста. Например, преподаватель единолично ставит отметку студенту, а врач - диагноз больному.

     Но  в сложных случаях заболевания  или угрозе отчисления студента за плохую учебу обращаются к коллективному  мнению - симпозиуму врачей или комиссии преподавателей. Аналогичная ситуация - в армии. Обычно командующий принимает решение единолично. Но в сложных и ответственных ситуациях проводят военный совет. Один из наиболее известных примеров такого рода - военный совет 1812 г. в Филях, на котором под председательством М.И. Кутузова решался вопрос: "Давать или не давать французам сражение под Москвой?"

     Другой  простейший пример экспертных оценок - оценка номеров в КВН. Каждый из членов жюри поднимают табличку со своей оценкой, а технический работник вычисляет среднюю арифметическую оценку, которая и объявляется как коллективное мнение жюри.

     В фигурном катании процедура усложняется - перед усреднением отбрасываются  самая большая и самая маленькая  оценки. Это делается для того, чтобы  не было соблазна завысить оценку одной спортсменке или занизить другой. Такие резко выделяющиеся из общего ряда оценки будут сразу отброшены.

     Экспертные  оценки часто используются при выборе, например:

- одного  варианта технического устройства  для запуска в серию из нескольких образцов,

- группы  космонавтов из многих претендентов,

- набора  проектов научно-исследовательских  работ для финансирования из  массы заявок,

- получателей  экологических кредитов из многих  желающих,

- при  выборе инвестиционных проектов  для реализации среди представленных, и т.д.  
 
 
 
 
 
 
 
 
 

Заключение

     Динамизм  и новизна современных народнохозяйственных задач, возможность возникновения  разнообразных факторов, влияющих на эффективность решений, требуют, чтобы  эти решения принимались быстро и в то же время были хорошо обоснованы. Опыт, интуиция, чувство перспективы в сочетании с информацией помогают специалистам точнее выбирать наиболее важные цели и направления развития, находить наилучшие варианты решения сложных научно-технических и социально-экономических задач в условиях, когда нет информации о решении аналогичных проблем в прошлом.

     Использование метода экспертных оценок помогает формализовать  процедуры сбора, обобщения и  анализа мнений специалистов с целью  преобразования их в форму, наиболее удобную для принятия обоснованного решения.

     Но, следует заметить, что метод экспертных оценок не может заменить ни административных, ни плановых решений, он лишь позволяет  пополнить информацию, необходимую  для подготовки и принятия таких  решений. Широкое использование экспертных оценок правомерно только там, где для анализа будущего невозможно применить более точные методы.

     Экспертные методы непрерывно развиваются и совершенствуются. Основные направления этого развития определяются рядом факторов, в числе которых можно указать на стремление расширить области применения, повысить степень использования математических методов и электронно-вычислительной техники, а также изыскать пути устранения выявляющихся недостатков.

     Несмотря на успехи, достигнутые в последние годы в разработке и практическом использовании метода экспертных оценок, имеется ряд проблем и задач, требующих дальнейших методологических исследований и практической проверки. Необходимо совершенствовать систему отбора экспертов, повышение надежности характеристик группового мнения, разработку методов проверки обоснованности оценок, исследование скрытых причин, снижающих достоверность экспертных оценок.

     Однако уже и сегодня экспертные оценки в сочетании с другими математико-статистическими методами являются важным инструментом совершенствования управления на всех уровнях. 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Список литературы 

1. Бешелев С. Д., Гурвич Ф.Г. Экспертные оценки. М., Наука, 197, 246 с. 

2. Евланов Л. Г., Кутузов В. А. Экспертные оценки в управлении. М., Экономика, 1978, 133 с. 

3. Тихомиров Ю. А. Управленческое решение. М., Наука, 1996, 278 с. 

4. http://www.aup.ru/books/m157/3_4_1.htm