Экспертные оценки и экспертный опрос

СОДЕРЖАНИЕ 

ВВЕДЕНИЕ…………………………………………………………….3

1. Сущность  метода экспертных оценок……………………………..4

2. Роль  экспертной оценки в финансовой  деятельности фирм..........6

3. Основные  стадии экспертного опроса……………………………..9

4. Подбор  экспертов………………………………………………….12

5. Разновидности  форм проведения экспертного  опроса………….15

ЗАКЛЮЧЕНИЕ……………………………………………………….18

СПИСОК  ИСПОЛЬЗОВАННЫХ ИСТОЧНИКОВ………………...19 
 
 
 
 
 
 
 

ВВЕДЕНИЕ 
Проблема принятия решений - является одной из ключевых в современной теории и практике управления. Это вполне естественно, так как акт принятия решения является центральным моментом любого процесса управления.  
Жизнь любого человека состоит из множества решений: некоторые привычны и просты, другие требуют серьезных размышлений. Человек, зачастую бессознательно, подходит к решению своих проблем с помощью определенных моделей. Модель, с самых общих позиций, - это упорядоченный набор предположений о сложной системе, это попытка понять какой - либо один аспект бесконечно изменчивого мира с помощью некоторого набора обобщенных представлений, которые могут быть распространены на решаемую проблему.  
Политика - это специфическая сфера человеческой деятельности, в которой проявляются отличия интересов социальных групп, нации, классов, ядром которых является проблема завоевания, удержания и использования государственной власти.  
Основными задачами данной работы являются:  
1. Рассмотреть сущность экспертной оценки.  
2. Рассмотреть основные стадии экспертного опроса.  
3. Рассмотреть организацию экспертной оценки.  
4. Рассмотреть каким образом подбирается экспертная группа.

Актуальность: противники метода экспертных оценок утверждают, что таким способом невозможно получить достоверно точную информации. Но на сегодняшний день он остаётся одним из самых используемых методов. В данной области проведено немало исследований, продолжается работа по улучшению механизмов проведения экспертных оценок для получения наиболее достоверной информации.

Цель работы: изучение экспертного опроса как метода исследования систем управления.

1. Сущность метода экспертных оценок

      Экспертные  методы прогнозирования применяются, как правило, в случаях, когда  отсутствуют какие-либо статистические данные, на которых мог бы базироваться количественный прогноз, как, например, в случае, когда предприятие собирается выпустить на рынок совершенно новый продукт. Но даже когда статистическая информация имеется, при использовании ее для прогнозирования могут возникнуть трудности, которые можно разделить на четыре группы:

      1) исходная статистическая информация зачастую бывает недостоверной. Однако даже при наличии достоверных данных о прошлом, они не всегда могут служить надежной базой для принятия плановых решений, направленных в будущее;

      2) некоторая часть информации, необходимой для выбора наилучшего варианта планового решения, имеет качественный характер и не поддается количественным измерениям (например, невозможно разработать формулу для прогнозирования (оценки) поведения людей в той или иной ситуации, в производственном коллективе);

      3) в момент принятия решения необходимая статистическая информация отсутствует, а ее получение требует времени или средств;

      4) существует большая группа факторов, которые будут влиять на реализацию планов, но при подготовке плановых решений их нельзя точно предсказать.

      Для применения статистических методов прогнозирования необходимо проводить исследовательскую работу и пользоваться услугами квалифицированных статистиков - и то и другое может дорого стоить.

      Кроме того, в условиях динамичного развития общества, когда происходят какие-то кардинальные изменения в экономике, в социальной сфере, в технике, в технологии и в других областях эффективность применения статистических методов для прогнозирования и планирования, особенно на длительный период, снижается.

      Существует  также опасность, что управляющие станут чрезмерно полагаться на статистические методы и на полученные, на их основе результаты и поэтому могут не заметить существенных изменений, значение которых мог бы оценить другой специалист.

      В таких условиях особую роль в предвидении будущего приобретает интуиция специалистов, называемых экспертами.

      Интуиция - это способность человека делать заключения об исследуемом объекте, его будущих состояниях неосознанно, т.е. без осознания пути движения мысли к этим заключениям.

      Методы  анализа и обобщения суждений и предположений с помощью  экспертов называются экспертными  или методами экспертных оценок.

      "Сущность  метода экспертных оценок заключается  в проведении экспертами интуитивно-логического  анализа проблемы с количественной  оценкой суждений и формальной обработкой результатов. Получаемое в результате обработки обобщенное мнение принимается как решение проблемы.  
 
 
 

2. Роль экспертной оценки в финансовой деятельности фирм

      Успех корпоративной политики современного бизнеса во многом определяется степенью принятия правильных решений как внутри корпорации, так и по отношению к внешней среде, в том числе с учетом политических факторов. В свою очередь результат корпоративного планирования и прогнозирования определяется выбором метода анализа и отбора влияющих факторов, а также их качественной и количественной оценки.

      Не  редко возникают ситуации, когда  при планировании возможности применения точных математических методов ограниченны. Кроме того, в большинстве случаев  не представляется возможным оценить значительную часть воздействий одних факторов на другие, степень взаимодействия, а также численное значение показателей. В ситуации, когда эконометрическими способами невозможно получить оценки из-за отсутствия достаточно точной статистической и другой информации о факторах, событиях и сценариях, а также надежных математических моделей, описывающих реальное состояние системы, экспертные оценки, основанные на получении обобщенных мнений экспертов, являются единственным средством решения задач прогнозирования. "Проведение экспертных исследований, представляющие собой синтез математических методов и практического опыта экспертов, основано на использовании современных методов прикладной математической статистики, прежде всего статистики объектов нечисловой природы, а также современной компьютерной техники".

      Существует  большой ряд задач, где целесообразно  и необходимо применение метода экспертных оценок:

- задачи планирования, принятия решений, оценки рисков, прогнозирования развития событий,

- задачи оценивания и выбора технических объектов, в том числе специального назначения,

- при анализе и прогнозировании ситуаций с большим числом значимых факторов - в том случае, когда имеется группа экспертов, компетентных в этой области.

      Если  область достаточно широкая или требуется оценить факторы, относящиеся к нескольким областям, целесообразно привлечение нескольких групп экспертов.

      Применение  экспертных оценок основано на том, что  при решении проблем в условиях невозможности использования измерительных способов или расчетных данных, мнение группы экспертов дает более точные прогнозируемые данные или оценки, нежели суждение некоторого одного эксперта. А две группы одинаково сведущих экспертов с большей вероятностью дадут сходные ответы, чем два эксперта. Справедливо полагать, что совокупность ответов каждого эксперта содержит искомое решение поставленной задачи.

      Последствия решений менеджера, экономиста, инженера проявятся в будущем. А будущее  неизвестно. Мы вынуждены принимать  решения в условиях неопределенности. Мы всегда рискуем, поскольку нельзя исключить возможность нежелательных событий. Но можно сократить вероятность их появления и возможный ущерб. Для этого необходимо спрогнозировать дальнейшее развитие событий, в частности, последствия принимаемых решений, выявить риски, оценить их, а затем управлять рисками.

      Отметим большое практическое значение экспертиз  при сравнении и выборе инвестиционных и инновационных проектов, при  управлении проектами, экологических  экспертиз. Роли лиц, принимающих решения, и специалистов (экспертов) в процедурах принятия решений, критерии принятия решений и место экспертных оценок в процедурах принятия решений рассматриваются в экспертологии - научно-практической дисциплине, посвященной методам экспертных оценок. На ее основе формируются конкретные процедуры подготовки и принятия решений с использованием методов экспертных оценок, например, процедуры распределения финансирования научно-исследовательских работ (на основе балльных оценок или парных сравнений), технико-экономического анализа, кабинетных маркетинговых исследований (противопоставляемых "полевым" выборочным исследованиям), оценки, сравнения и выбора инвестиционных проектов. В качестве примеров конкретных экспертных процедур, широко используемых при прогнозировании, укажем метод Дельфи и метод сценариев.

      Из  сказанного выше вытекает, что разнообразные  формальные методы оценки рисков и  управления ими во многих случаях (реально  во всех нетривиальных ситуациях) не могут дать однозначных рекомендаций. В конце процесса принятия решения - всегда человек, менеджер, на котором лежит ответственность за принятое решение. Поэтому процедуры экспертного оценивания естественно применять на всех этапах анализа рисков рассматриваемого организацией проекта. При этом нецелесообразно полностью отказываться от использования формальных экономических методов, например, основанных на вычислении чистых текущих потерь и других характеристик. Использование соответствующих программных продуктов полезно для принятия обоснованных решений. Однако на основные вопросы типа: достаточно ли высоки доходы, чтобы оправдать риск, или: что лучше - быстро, но мало, или долго, но много - ответить могут только менеджеры с помощью экспертов. Поэтому система поддержки принятия решений в организации должна сочетать формально-экономические и экспертные процедуры.

3. Основные стадии экспертного опроса

      Как показывает опыт проведения экспертных исследований, с точки зрения менеджера - организатора такого исследования целесообразно  выделять следующие стадии проведения экспертного опроса.

1) Принятие  решения о необходимости проведения  экспертного опроса и формулировка  Лицом, Принимающим Решения его цели. Таким образом, инициатива должна исходить от руководства, что в дальнейшем обеспечит успешное решение организационных и финансовых проблем.

2) Подбор  и назначение ЛПР основного  состава Рабочей группы, сокращенно  РГ (обычно - научного руководителя  и секретаря). При этом научный  руководитель отвечает за организацию  и проведение экспертного исследования  в целом, а также за анализ собранных материалов и формулировку заключения экспертной комиссии. Он участвует в формировании коллектива экспертов и выдаче задания каждому (вместе с ЛПР или его представителем). Дело секретаря - ведение документации, решение организационных задач.

3) Разработка  РГ (точнее, ее основным составом, прежде всего научным руководителем  и секретарем) и утверждение у  ЛПР технического задания на  проведение экспертного опроса. На этой стадия решение о  проведении экспертного опроса  приобретает четкость во времени, финансовом, кадровом, материальном и организационном обеспечении. В частности, в РГ выделяются различные группы специалистов - аналитическая, эконометрическая (специалисты по методам анализа данных), компьютерная, по работе с экспертами (например, интервьюеров), организационная. Очень важно для успеха, чтобы все эти направления работ были утверждены ЛПР.

4) Разработка  аналитической группой РГ подробного  сценария (т.е. регламента) проведения  сбора и анализа экспертных  мнений (оценок). Сценарий включает в себя, прежде всего, конкретный вид информации, которая будет получена от экспертов (например, тексты (слова), условные градации, числа, ранжировки, разбиения или иные виды объектов нечисловой природы). Так, довольно часто экспертов просят высказаться в свободной форме, ответив при этом на некоторые количество заранее сформулированных вопросов. Кроме того, их просят заполнить формальную карту, в каждом пункте выбрав одну из нескольких градаций. Сценарий должен содержать и конкретные методы анализа собранной информации. Например, вычисление медианы Кемени, статистический анализ люсианов, применение иных методов статистики объектов нечисловой природы и других разделов современной эконометрики. Эта работа ложится на эконометрическую и компьютерную группу РГ. Традиционная ошибка - сначала собрать информацию, а потом думать, что с ней делать. "В результате, как показывает опыт, информация используется лишь на 1-2%."

5) Подбор  экспертов в соответствии с  их компетентностью. На этой  стадии РГ составляет список возможных экспертов.

6) Формирование  экспертной комиссии. На этой  стадии РГ проводит переговоры  с экспертами, получает их согласие  на работу в экспертной комиссии (ЭК), возможно, часть намеченных РГ экспертов отказывается по тем или иным причинам. ЛПР утверждает состав экспертной комиссии, возможно, вычеркнув или добавив часть экспертов к предложениям РГ. Проводится заключение договоров с экспертами об условиях их работы и ее оплаты.

7) Проведение  сбора экспертной информации. Часто  перед этим проводится набор и обучение интервьюеров - одной из групп, входящих в РГ.

8) Компьютерный  анализ экспертной информации  с помощью включенных в сценарий  методов. Ему обычно предшествует  введение информации в компьютеры.

9) При  применении согласно сценарию  экспертной процедуры из нескольких туров - повторение двух предыдущих этапов.

10) Итоговый  анализ экспертных мнений, интерпретация  полученных результатов аналитической  группой РГ и подготовка заключительного  документа ЭК для ЛПР.

11) Официальное  окончание деятельности РГ, в  том числе утверждение ЛПР  заключительного документа ЭК, подготовка  и утверждение научного и финансового  отчетов РГ о проведении исследования, оплата труда экспертов и сотрудников  РГ, официальное прекращение деятельности (роспуск) ЭК и РГ. 
 
 
 
 
 
 
 
 
 
 
 

4. Подбор экспертов

      Проблема  подбора экспертов является одной  из наиболее сложных в теории и  практике экспертных исследований. Очевидно, в качестве экспертов необходимо использовать тех людей, чьи суждения наиболее помогут принятию адекватного решения. Но как выделить, найти, подобрать таких людей? Надо прямо сказать, что нет методов подбора экспертов, обеспечивающих успех экспертизы.

      В проблеме подбора экспертов можно  выделить две составляющие - составление  списка возможных экспертов и выбор из них экспертной комиссии в соответствии с компетентностью кандидатов.

      Составление списка возможных экспертов облегчается  тогда, когда рассматриваемый вид  экспертизы проводится многократно. В  таких ситуациях обычно ведется  реестр возможных экспертов, например, в области государственной экологической экспертизы или судейства фигурного катания, из которого можно выбирать по различным критериям или с помощью датчика псевдослучайных чисел.

      Как быть, если экспертиза проводится впервые, устоявшиеся списки возможных экспертов отсутствуют? Однако и в этом случае у каждого конкретного специалиста есть некоторое представление о том, что требуется от эксперта в подобной ситуации. "Для формирования списка есть полезный метод "снежного кома", при котором от каждого специалиста, привлекаемого в качестве эксперта, получают несколько фамилий тех, кто может быть экспертом по рассматриваемой тематике". Очевидно, некоторые из этих фамилий встречались ранее в деятельности РГ, а некоторые - новые. Каждого вновь появившегося опрашивают по той же схеме. Процесс расширения списка останавливается, когда новые фамилии практически перестают встречаться. В результате получается достаточно обширный список возможных экспертов. Метод "снежного кома" имеет и недостатки. Число туров до остановки процесса наращивания кома нельзя заранее предсказать. Кроме того, ясно, что если на первом этапе все эксперты были из одного "клана", придерживались в чем-то близких взглядов или занимались сходной деятельностью, то и метод "снежного кома" даст, прежде всего, лиц из этого "клана". Мнения и аргументы других "кланов" будут упущены.

      Вопрос  об оценке компетентности экспертов  не менее сложен. Успешность участия  в предыдущих экспертизах - хороший  критерий для деятельности дегустатора, врача, судьи в спортивных соревнованиях, т.е. таких экспертов, которые участвуют в длинных сериях однотипных экспертиз. Однако, увы, наиболее интересны и важны уникальные экспертизы больших проектов, не имеющих аналогов. Использование формальных показателей экспертов (должность, ученые степень и звание, стаж, число публикаций...), очевидно, в современных условиях может носить лишь вспомогательный характер, хотя подобные показатели проще всего применять.

      Часто предлагают использовать методы самооценки и взаимооценки компетентности экспертов. Обсудим их, начав с метода самооценки, при котором эксперт сам дает информацию о том, в каких областях он компетентен, а в каких - нет. С одной стороны, кто лучше может знать возможности эксперта, чем он сам? С другой стороны, при самооценке компетентности скорее оценивается степень самоуверенности эксперта, чем его реальная компетентность. Тем более, что само понятие "компетентность" строго не определено. Можно его уточнять, выделяя составляющие, но при этом усложняется предварительная часть деятельности экспертной комиссии. Достаточно часто эксперт преувеличивает свою реальную компетентность. Например, большинство людей считают, что они хорошо разбираются в политике, экономике, проблемах образования и воспитания, семьи и медицины. На самом деле экспертов (и даже знающих людей) в этих областях весьма мало. При использовании метода взаимооценки, помимо возможности проявления личностных и групповых симпатий и антипатий, играет роль малая осведомленность экспертов о возможностях друг друга. В современных условиях достаточно хорошее знакомство с работами и возможностями друг друга может быть лишь у специалистов, много лет (не менее 3-4) работающих совместно, в одной комнате, над одной темой. Именно про такие пары можно сказать, что они "вместе пуд соли съели". Однако привлечение таких пар специалистов не очень-то целесообразно, поскольку их взгляды из-за схожести жизненного пути слишком похожи друг на друга. Если процедура экспертного опроса предполагает непосредственное общение экспертов, необходимо учитывать еще ряд обстоятельств. Большое значение имеют их личностные (социально-психологические) качества. Так, один-единственный "говорун" может парализовать деятельность всей комиссии на совместном заседании. К срыву могут привести и неприязненные отношения членов комиссии, и сильно различающийся научный и должностной статус членов комиссии. В подобных случаях важно соблюдение регламента работы, разработанного РГ. Необходимо подчеркнуть, что подбор экспертов, в конечном счете - функция Рабочей группы, и никакие методики подбора не снимают с нее ответственности. Другими словами, именно на Рабочей группе лежит ответственность за компетентность экспертов, за их принципиальную способность решить поставленную задачу. Важным является требование к ЛПР об утверждении списка экспертов. При этом ЛПР может, как добавить в комиссию отдельных экспертов, так и вычеркнуть некоторых из них - по собственным соображениям, с которыми членам РГ и ЭК знакомиться нет необходимости. Существует ряд нормативных документов, регулирующих деятельность экспертных комиссий в тех или иных областях. Примером является Закон Российской Федерации "Об экологической экспертизе" от 23 ноября 1995 г., в котором регламентируется процедура экспертизы "намечаемой хозяйственной или иной деятельности".

5. Формы проведения экспертного опроса

      Выбор вариантов работы с экспертами (очная  или заочная форма) определяется спецификой проблемы и ситуацией. Очные  варианты работы с экспертами позволяют  собрать более качественную информацию, хотя есть сложности организационного порядка и взаимовлияния экспертов. Заочные же формы работы с экспертами дают возможность пренебрегать географическими рамками при опросе экспертов, исключает взаимовлияние их, однако делает работу экспертных групп не оперативной.

- Свободное интервью экспертов. Имеет разведывательную цель и чаще используется, когда необходимо более точно представить проблему, уточнить некоторые нюансы, чётче интерпретировать употребляемые понятия и наметить основные направления исследования. Число интервьюируемых экспертов здесь невелико (10-15), но главное — чтобы подобранные эксперты были представителями разных в профессиональном и научном отношении точек зрения. Такое интервью проводится опытным социологом.

- Анкетный опрос экспертов.

- «Мозговой штурм», «Мозговая атака» — прямой обмен мнениями, стимулирование наблюдения. Основная цель — нахождение решения или путей решения какой-либо научной или практической проблемы.

- Почтовый анкетный опрос экспертов.

- Дельфийская техника — многократный почтовый анкетный опрос одной и той же группы экспертов с применением шкалированных оценок. Цель данного вида опроса экспертов — сопоставление тщательно скорректированной программы последовательных индивидуальных опросов, направленной на уменьшение группового влияния, возникающего при совместной работе экспертов. Суть метода — в интерактивных циклах, обеспечивающих обратную связь: после первого опроса экспертов и обработки его результатов, итоги сообщаются участникам экспертной группы. Они должны либо подтвердить свою точку зрения, высказанную на предыдущем этапе, и если она значительно отличается от мнения большинства, развернуто ее мотивировать, либо изменить свою оценку в соответствии с мнением большинства участников. Затем снова производят обработку информации, результаты вновь рассылаются экспертам и так до тех пор, пока не прекратится «эффект интерактивных циклов», то есть пока новые туры опроса не перестанут давать статистически значимое увеличение согласованности оценок экспертов (обычно это достигается на 4-5 туре опроса). Очевидно, что данный вид работы с экспертами весьма трудоемок и сложен, хотя использование дельфийской техники имеет и свои преимущества: обеспечивается анонимность опроса путем исключения взаимодействия экспертов; установление обратной связи в виде сообщения обработанной информации о согласованной точке зрения экспертов на предыдущих этапах опроса; исключения взаимовлияния экспертов. Метод Дельфы не имеет целью достичь полное единство мнений экспертов по существу вопроса, поэтому несмотря на сближение точек зрения, различие во мнениях экспертов все равно будет существовать. Недостатком данного вида опроса экспертов является зависимость оценок, данных экспертами от формулировок вопросов и аргументации; влияние общественного мнения на экспертов. 
Политика - это специфическая сфера человеческой деятельности, в которой проявляются отличия интересов социальных групп, нации, классов, ядром которых является проблема завоевания, удержания и использования государственной власти. Самое существенное в политике - это "устройство государственной власти. Политика есть участие в делах государства, направление государства, определение форм, задач, содержания деятельности государства". Любая общественная проблема приобретает политический характер, если ее решение, прямо или опосредованно, связано с классовыми интересами, проблемой власти.  
Основной предмет политической науки - политическая власть, реализуемая в политических системах и в других формах политической деятельности.  
Достаточно часто в политической практике используют так называемые экспертные опросы, когда респондентами выступает не большое количество граждан (от нескольких сотен до нескольких тысяч опрошенных), а сравнительно немного специалистов, которые занимаются проблемами политики. При соответствующем подборе экспертов и соответствующем уровне их квалификации результаты таких опросов могут быть очень полезными.  
 Первым этапом организации работ по применению экспертного оценивания является подготовка и издание руководящего документа, в котором формулируется цель работы и основные положения по ее выполнению. В этом документе должны быть отражены следующие вопросы: постановка задачи эксперимента; цели эксперимента; обоснование необходимости эксперимента; сроки выполнения работ; задачи и состав группы управления; обязанности и права группы. 
 
 
 
 
 
 
 
 
 
 
 

ЗАКЛЮЧЕНИЕ

Метод экспертных оценок представляет собой процедуру, позволяющую группе экспертов приходить к согласию. Его особенность заключается в том, что он направлен на выявления информации, которая отражает знания, мнения, ценностные ориентации и установки резидентов, их отношения к каким-либо явлениям действительности. И то, что эта информация основывается на индивидуальном интересе респондента и может быть весьма субъективна, отнюдь не противоречит научно-образному способу её получения. Наоборот, цель опроса заключается в том, чтобы при помощи соответствующего инструментария получить достоверные сведения о предмете и объекте исследования. Вышеуказанными проблемами и занимаются эксперты. Эксперт это компетентное лицо, имеющее глубокое знания о предмете или объекте исследования. Метод экспертных оценок не может заменить ни административных, ни плановых решений, он лишь позволяет пополнить информацию, необходимую для подготовки и принятия таких решений. Широкое использование экспертных оценок правомерно только там, где для анализа будущего невозможно применить более точные методы.

Экспертные  методы непрерывно развиваются и  совершенствуются. Основные направления  этого развития определяются рядом  факторов, в числе которых можно  указать на стремление расширить  области применения, повысить степень использования математических методов и электронно-вычислительной техники, а также изыскать пути устранения выявляющихся недостатков.  
 
 

СПИСОК  ИСПОЛЬЗОВАННЫХ ИСТОЧНИКОВ

1. Денисова  А.Л., Зайцев Е.В. Теория и практика  экспертной оценки товаров и  услуг. Тамбов: ТГТУ, 2002

2. Г.Б.  Клейнер. Стратегии бизнеса: аналитический  справочник. - М.: "Консеко", 1998

3. Орлов  А.И. Прикладная статистика. - М.: Издательство "Экзамен", 2004

4. Орлов  А.И. Теория принятия решений.  Учебное пособие. - М.: Издательство "Март", 2004

5. Орлов  А.И. Менеджмент. Учебник. - М.: Издательство "Изумруд", 2003

6. Орлов  А.И. Экспертные оценки. Учебное  пособие. - М.,2002

7. Менеджмент. Учебное пособие. / Под ред. Ж.В.  Прокофьевой. - М.: Знание, 2000.

8. В.И.  Тинякова. Математические методы обработки экспертной информации. - Воронеж, 2006

9. Горский  В.Г., Орлов А.И., Гриценко А.А. "Метод  согласования кластеризованных  ранжировок". // "Автоматика и  телемеханика". 2000

10. Мазманова  Б.Г. "Методические вопросы прогнозирования  сбыта" // "Маркетинг в России и за рубежом" №1 – 2000.