4.1. Характеристика методов экспертных оценок

Журнал "У". Экономика. Управление. Финансы.

 
×

Предупреждение

JUser: :_load: Не удалось загрузить пользователя с ID: 71

4.1. Характеристика методов экспертных оценок

Экспертные исследования могут иметь как самостоятель­ное значение, так и использоваться при проверке истинности (верификации) логических исследований и моделирования.

Прогнозные экспертные оценки отражают индивидуаль­ность суждения  специалистов относительно эффективности, расхода ресурсов, безопасности, а также перспектив развития объекта и основаны на мобилизации профессионального опыта и интуиции.

Экспертные методы исследований используют в следующих случаях:

1) когда объект или явление либо полностью, либо частично не поддается предметному описанию или математи­ческой формализации;                          

2) в условиях отсутствия достаточно представительной и достоверной статистики по характеристикам объекта;

3) в условиях большой неопределенности среды функционирования объекта, особенно рыночной среды;

4) при средне- и долгосрочном прогнозировании новых рынков, объектов новых областей промышленности, подвер­женных сильному влиянию инноваций;

5) в случаях, когда или время или средства, выделяемые на прогнозирование и принятие решений, не позволяют иссле­довать проблему с применением формальных моделей;

6) отсутствуют необходимые технические средства моде­лирования, например, вычислительная техника с соответствую­щими характеристиками;

7) в экстремальных ситуациях.

Методы экспертных  оценок  можно разделить на две группы: методы коллективной работы экспертной группы и методы  получе­ния индивидуального мнения членов экспертной группы (рис.4.1).

Методы коллективной работы экспертной группы предполагают получение общего мнения  в ходе совместного обсуждения решаемой проблемы. Иногда эти методы называют методами прямого получения коллективного мнения. Основное преимущество этих методов заключается в возможности разностороннего анализа проблем. Недостатками методов является сложность процедуры получения информации, сложность формирования группового мнения по индивидуальным суждениям экспертов, возможность давления авторитетов в группе. Методы коллективной работы включают методы “мозговой атаки”, сценариев, деловых игр, совещаний и “суда”, “дерева целей”.

Метод "мозговой атаки" получил распространение как "метод систематической тренировки  творческого мышления",  нацеленный "на открытие новых идей и достижение согласия группы людей на основе интуитивного мышления". Методы этого типа извест­ны также под названием коллективной генерации идей,  мозгового штурма, дискуссионные методы. Все эти методы основаны на сво­бодном выдвижении идей, направленных на решение проблемы. За­тем из этих идей отбираются наиболее ценные.

41

Возможны различные варианты реализации этих методов. Наи­более распространенным является следующий.

Создаются две  группы экспертов: генераторов идей и аналитиков. В состав первой группы включаются люди с богатым воображением, как правило, специалисты  из смежных, с решаемой проблемой, областей. Организуется собрание группы, которым руководит ведущий. Основной задачей ведущего является всемерное поощрение инициативы и творчества, свободы выдвижения новых идей, даже на первый взгляд сомни­тельных или абсурдных, недопущение критики.  Все выдвинутые идеи фиксируются и передаются группе аналитиков. Группа анали­тиков включает в основном специалистов по данной проблеме, анализирующих предложения и выбирающих среди них наиболее цен­ные.

"Мозговой штурм" проводится в два этапа: этап генерации идей и этап практического анализа выдвинутых идей.

Каждый из этапов осуществляется по конкретным принципам, отражающим его назначение и суть, определяющим его эффективность.

Первый этап (генерации идей) предполагает следующие принципы:

1. Принцип формирования группы по способностям к научному вообра­жению и развитой интуиции, разнообразию знаний и научных интере­сов.

2. Отбор группы для генерации идей можно делать по результатам специ­ального тестирования, с учетом психологических характеристик.

3. Необходимо создать в работе этой группы атмосфе­ру непринужденности, творчества, взаимоприемлемости.

4. Принцип строгого запрещения всякой критики.

5. Принцип запрещения обоснования выдвигаемых идей. Можно предла­гать лишь дополнительные идеи, отличные от высказанной. Нельзя "присоединяться к мнению" или "расшифровывать" свои или чужие идеи.

6. Принцип мотивации разнообразных идей, снятия ограничений по обла­сти знаний, богатству опыта, должностному статусу, возрасту, соци­альному положению.

7. В группу могут входить специалисты в различных областях зна­ний, разного опыта и научно - практического статуса. Разнообразие участников работы способствует генерации идей.

8. Принцип регламента времени на выдвижение идей.

На втором этапе "мозгового штурма" (этапе анализа) также действует ряд принципов, отражающих назначение и суть этого этапа.

1. Принцип полноты анализа идей и их обобщения. Ни одна высказанная идея, как бы скептически она ни оценивалась первоначально, не долж­на исключаться из практического анализа.

2. Принцип аналитического потенциала. Группа должна состоять из ана­литиков, хорошо понимающих суть проблемы, цели и сферу исследо­вания.

3. Принцип критериальной четкости в оценке и анализе идей. Для обес­печения объективности оценки и анализа идей, должны быть сформу­лированы предельно четкие критерии, которыми должны руководство­ваться все члены аналитической группы.

4. Принцип дополнительной разработки идеи и ее конкретизации. Мно­гие первоначально высказанные идеи нуждаются в своем уточнении, конкретизации, дополнении. Они могут быть проанализированы, при­няты либо исключены из анализа только после соответствующей дора­ботки.

5. Принцип позитивизма в анализе идей. Можно проводить анализ на ос­нове различных подходов: негативизма и позитивизма. Первый прово­дится по установке на критические оценки, скептицизм, жесткость практических критериев. Второй - по поиску рационального, пози­тивного, конструктивного в любых их проявлениях.

Что же касается оптимальной численности группы участников сессии КГИ, то этот вопрос исследовался экспериментально и наиболее продуктивными признаны группы в 10 – 15 человек.

Метод "мозгового штурма" имеет множество разновидностей.

Одной из них является метод коллективного обсуждения фиксированных идей. Суть его заключается в том, что все участники творческого процесса фиксируют на специальных карточках свои идеи относительно решения какой-либо проблемы. Далее карточки смешиваются и раздаются в случайном порядке всем участникам. Каждый из них должен дать гласную оценку попавшей к нему идее. Вокруг этого может возникнуть полемика, которая позволяет уточнить идею или ее отбросить как нереальную. В процессе полемики могут возникать и новые идеи.

Существует также метод "обратного мозгового штурма", при котором группа генерации идей проводит как бы обратную работу. Она выявляет проблемы при оценке ситуации, не оценивая возможности их решения.

Метод "двойного мозгового штурма" предполагает подготовительную ра­боту в генерации идей, затем их постановку без анализа и оценки, и, наконец, аналитическое обсуждение. Здесь, как правило, параллельно с твор­ческой группой работает группа экспертов, следящих за ходом полемики и улавливающих ценные мысли.

Существует и метод "конференции идей", который реализуется по спе­циальной технологии их презентации.

Достоинством метода "мозговой  атаки" является высокая оперативность получения требуемого решения. Основной его недостат­ок - сложность организации экспертизы, так как иногда не­возможно собрать вместе требуемых специалистов, создать непри­нужденную атмосферу и исключить влияние должностных взаимоот­ношений.

Метод сценариев представляет собой совокупность правил по изложению в письменном виде предложений специалистов по решае­мой проблеме. Сценарий представляет собой документ, содержащий анализ проблемы  и  предложения по ее реализации.  Предложения вначале пишут эксперты индивидуально,  а затем они согласуются и излагаются в форме единого документа.

Сценарий - это гипотетическая картина последовательного развития во времени и пространстве событий, составляющих эволюцию объектов управления. Обычно сценарии  разрабатываются для прогнозирования раз­вития различных систем, предварительной оценки эффективности и возможного хода выполнения сложной операции и включают описа­ние всех этапов жизненного цикла системы или операции. В даль­нейшем такое описание является основой для разработки формали­зованных моделей различных этапов развития системы.  Иначе говоря,  сценарий является своеобразной описательной моделью, с которой начинается исследование любой системы в соответствии с этапами моделирования.

Сценарий предусматривает не только содержатель­ные рассуждения, помогающие не упустить детали, ко­торые невозможно учесть в формальной модели (в этом собственно и заключается основная роль сценария), но и содержит, как правило, результаты количественного тех­нико-экономического или статистического анализа с предварительными выводами. Группа экспертов, подго­тавливающая сценарий, пользуется обычно правом по­лучения необходимых справок от предприятий и органи­заций, необходимых консультаций. Написание сценария – это метод, который пытается установить логическую последовательность событий, чтобы показать, как, исходя из существующей ситуации, может шаг за шагом развертываться будущее состояние.

Цель метода - получение научно обоснованного прогноза для принятия управленческих решений.

Процедура сценарного метода - это определение гарантированного прогноза, т.е. границ, за которые развитие системы выйти не может по объективным причинам. То есть, это построение трубки прогноза (рис. 4.2).

4.2

Процедура:

·     задаются максимально возможные значения параметров тех факторов, которые положительно влияют на развитие системы, и минимальные значения тех факторов, которые препятствую ее развитию, и в этих условиях выбирается "идеальное" из допустимых управление и соответствующее ему состояние системы. Эта процедура называется "определение потенциала системы". Максимум - это максимально хорошее. Вероятность нахождения системы в граничащих состояниях (max и min) близка к нулю.

·     минимизируется действие положительных факторов и максимизируется действие отрицательных, т.е. определяется нижний предел развития системы.

В этом коридоре можно получить наиболее вероятное состояние системы и направить усилия на поддержание этого состояния.

Основной недостаток - "трубка" очень широка; задача носит вероятностный характер (применяются вероятностные методики).

Основным преимуществом сценария является комплексный ох­ват решаемой проблемы в доступной для восприятия форме.  К не­достаткам можно отнести возможную неоднозначность, нечеткость излагаемых вопросов и недостаточную обоснованность отдельных решений.

Деловые игры основаны на моделировании функционирования социальной системы управления при выполнении операций, нап­равленных на достижение поставленной цели. В отличие от преды­дущих методов, где экспертные оценки формируются в ходе кол­лективного обсуждения, деловые игры предполагают активную дея­тельность экспертной группы, за каждым членом которой закреп­лена определенная обязанность в соответствии с заранее состав­ленными правилами и программой.

Деловые игры широко используются для принятия решений при управлении промышленными предприятиями и другими организациями и направлены  также на исследование поведения и обучение специалистов в заданной обс­тановке.

Основным достоинством деловых игр является возможность выработки решения в динамике с учетом всех этапов исследуемого процесса при взаимодействии всех элементов общественной систе­мы управления. Недостаток заключается в сложности организации деловой игры в  условиях,  приближенных к реальной проблемной ситуации.

Метод совещаний (комиссий, круглого стола) - самый простой и традицион­ный. Он предполагает  проведение  совещания  или  дискуссии  с целью выработки единого коллективного мнения по решаемой проб­леме. В отличие от метода "мозговой атаки" каждый эксперт мо­жет не только высказывать свое мнение, но и критиковать пред­ложения других. В результате такого тщательного обсуждения уменьшается возможность ошибок при выработке решения.

Достоинством метода является простота его реализации. Од­нако на совещании может быть принято ошибочное мнение одного из участников в силу  его авторитета, служебного положения, настойчивости или ораторских способностей.

Метод "суда" является разновидностью метода совещаний и реализуется по аналогии с ведением судебного процесса. В роли "подсудимых" выступают выбираемые варианты решения; в роли "судей" - лица, принимающие решение; в роли "прокуроров" и "защитников" - члены экспертной группы. Роль "свидетелей" вы­полняют различные условия выбора и доводы экспертов. При веде­нии такого "судебного процесса" отклоняются или принимаются те или иные решения.

Метод "суда" целесообразно использовать при наличии нес­кольких групп экспертов, придерживающихся различных вариантов решения.

Метод “дерева целей”. Идеяметода дерева целей впервые была предложена У. Черменом в связи с проблемами принятия решений в промышленности.

Термин «дерево» подразумевает использование ие­рархической структуры, полученной путем разделения общей цели на подцели, а их, в свою очередь, на более детальные составляющие, которые можно называть под­целями нижележащих уровней или, начиная с некото­рого уровня, - функциями. Как правило, термин «дере­во целей» используется для иерархических структур, имеющих отношения строго древовидного порядка. При использовании метода «дерева целей» в качест­ве средства принятия решений часто вводят термин «дерево решений».  

Процесс разработки дерева целей напоминает строи­тельство пирамиды, только в отличие от каменных пира­мид эта строится не снизу вверх, а сверху вниз. Строя «пирамиду целей», разработчик от ее вершины передвигается вниз, каждый раз с учетом новой точки зрения воз­вращается к сделанному ранее, корректируя и подправ­ляя его. При этом имеется в виду сложный характер взаимосвязей между целями каждого уровня и различ­ных уровней, так что дерево целей приходится коррек­тировать все время по мере его построения.

Можно отметить четыре вида взаимозависимостей между целями:

1) взаимодополнение целей: цель А достигается толь­ко в случае достижения цели Б, и наоборот;

2) безразличие целей: цель А достигается независи­мо от достижения целиБ;

3) взаимоисключение целей: достигается либо цель А, либо Б;

4) конкуренция целей: ограниченное количество ре­сурсов может быть направлено либо на достижение цели А, либо Б.

В процессе формулировки каждой цели необходимо с самого начала проверять построенную пирамиду по следующим вопросам: имеются ли в принципе средства достижения этих целей; имеются ли в принципе ресурсы для создания этих средств.

Алгоритм построения дерева цели представлен на рисунке 4.3.

Достоинства метода “дерева целей”:

1. Позволяет эффективно принимать решения в различных управленческих ситуациях.

2. Позволяет повысить объективность принимаемых управленческих решений.

Недостаток – построение дерева целей требует больших затрат времени и усилий экспертов.

Методы получения индивидуального мнения членов экспертной группы основаны на предварительном сборе информации от экспер­тов, опрашиваемых независимо друг от друга,  с последующей об­работкой полученных данных. К этим методам можно отнести мето­ды анкетного опроса, интервью и методы Дельфи. Основные преимущества метода индивидуального экспертного оценивания состоят в их оперативности, возможности в полной мере использовать индивидуальные способности эксперта, отсутствие давления авторитетов и в низких затратах на экспертизу. Главным их недостатком является высокая степень субъективности получаемых оценок из-за ограниченности знаний одного эксперта.

Метод анкетного опроса предполагает разработку  специаль­ных анкет,  содержащих  перечень  вопросов по решаемой задаче. Анкеты размножаются по количеству экспертов и направляются  по соответствующим адресам.

43

Рисунок 4.3. Алгоритм построения “дерева целей”

В процессе заполнения анкет необходи­мо выполнить следующие требования: обеспечить взаимную незави­симость суждений экспертов; при необходимости проверить одноз­начное понимание экспертами вопросов анкеты;  не допускать за­полнение одной анкеты несколькими экспертами; анкету заполнять и отправлять в заданные сроки.

Анкеты собирает руководитель экспертизы; обрабатываются они с использованием статистических методов обработки эксперт­ной информации.

Основными достоинствами метода анкетного опроса являются возможность сбора большого объема информации за достаточно ко­роткий срок и независимость суждений экспертов. К недостаткам следует отнести сложность разработки эффективной анкеты, со­держащей обоснованный перечень вопросов.

Метод интервью предполагает беседу руководителя эксперти­зы с экспертом,  в ходе которой перед ним по заранее разрабо­танной программе ставятся сформулированные вопросы. Особен­ностью метода интервью является то, что руководитель и эксперт находятся в непосредственном контакте.

Условно выделяют три формы интервью: свободная беседа, когда дополнительные вопросы формируются в ходе интервью; бе­седа по типу "вопрос - ответ", когда определен ограниченный круг вопросов и на них необходимо дать  чёткий ответ; перекрестный опрос, когда эксперта спрашивают несколько исследователей.

Достоинством метода интервью является возможность получить сведения, малодоступные анкетному опросу. Однако на результаты опроса может оказать влияние личность руководителя, способность эксперта к контакту, быстрота его мышления и другие факторы.

Метод Дельфи, или метод дельфийского оракула, представляет собой итеративную процедуру анкетного опроса. Название этого метода обязано древнегреческому городу Дельфи, известному своими мудрецами - предсказателями будущего. Этот метод относится к классу методов групповых экспертных оценок и представляет собой итеративную процедуру анкетного опроса. Он был разработан в США в 1964 г. сотрудниками научно-исследовательской корпорации РЭНД О. Хелмером и Т. Гордоном.

При этом соблюдается требование отсутствия личных контактов между экспертами и обеспечения их полной информацией по всем результатам оценок после каждого тура опроса с сохранением анонимности оценок, аргументации и критики.

Процедура метода включает несколько последовательных этапов (туров) опроса. На первом этапе производится индивидуальный опрос экспертов, обычно в форме анкет. Эксперты дают ответы, не аргументируя их. Затем результаты опроса обрабатываются, и формируется коллективное мнение группы экспертов, выявляются и обобщаются аргументации в пользу различных суждений. На втором - вся информации сообщается экспертам и, их просят пересмотреть оценки и объяснить причины своего несогласия с коллективным суждением. Новые оценки вновь обрабатываются, и осуществляется переход к следующему этапу. Практика показывает, что после трех-четырёх этапов ответы экспертов стабилизируются и необходимо прекращать процедуру.

При использовании метода Дельфи учитывают следующие требования:

1. Группы экспертов должны быть стабильными и численность их должна удерживаться в благоразумных рамках. Способ стабилизации экспертной группы заключается в следующем. На основе анализа литературы по прогнозируемой проблеме выбирается любой специалист, имеющий несколько публикаций в данной области. К нему обращаются с просьбой назвать 10 наиболее компетентных, по его мнению, специалистов по данной проблеме. Затем обращаются одновременно к каждому из десяти названных специалистов с просьбой указать 10 наиболее известных из коллег – ученых. Из полученного списка специалистов вычеркивают 10 первоначальных, а остальным рассылаются письма, содержащие указанную выше просьбу. Данную процедуру повторяют до тех пор, пока ни один из вновь названных специалистов не сможет добавить новые фамилии к списку экспертов, т.е. пока не стабилизируется группа экспертов. Полученную группу экспертов можно считать генеральной совокупностью специалистов, компетентных в области прогнозируемой проблемы. Однако в силу ряда практических ограничений оказывается нецелесообразным привлекать всех специалистов к экспертизе. Поэтому необходимо сформировать репрезентативную выборку из генеральной совокупности экспертов. Этот вопрос решается в рамках каждого конкретного метода экспертного прогнозирования.

2. Время между турами опросов должно быть не более месяца.

3. Вопросы в анкетах должны быть тщательно продуманы и четко сформулированы.

4. Число туров должно быть достаточным, чтобы обеспечить всем участникам возможность ознакомиться с причиной той или иной оценки, а также и для критики этих причин.

5. Должен проводиться систематический отбор экспертов.

Достоинством метода Дельфи является использование обратной связи в ходе опроса, что значительно повышает объективность экспертных оценок. Однако данный метод требует значительного времени на реализацию всей многоэтапной процедуры.

Выходные данные:

Григан А.М. Управленческая диагностика: теория и практика: Монография / А.М. Григан. Ростов н/Д: Изд-во РСЭИ, 2009. 316 с.


  • Титульный лист

    Содержание

    Введение

    Глава 1. Теоретические основы управленческой диагностики

    Глава 2. Диагностика проблем и развития организации

    Глава 3. Методы управленческой диагностики

    Глава 4. Экспертные методы в управленческой диагностике

    Глава 5. Функциональные области управленческой диагностики

    Глава 6. Планирование и организация управленческой диагностики

    Глоссарий

    Литература

    Приложение: Учебно-методические материалы для изучения дисциплины «Управленческая диагностика»