Методы экспертных оценок

Сущность методов экспертных оценок заключается в том, что в основу прогноза закладывается мнение специалиста или коллектива специалистов, основанное на профессиональном, научном и практическом опыте.

Индивидуальные экспертные оценки основаны на использовании мнений экспертов-специалистов соответствующего профиля. Среди индивидуальных экспертных оценок наиболее широкое распространение получили метод "интервью", аналитический метод, метод написания сценария.

Метод ”интервью” предполагает беседу прогнозиста с экспертом по схеме "вопрос-ответ", в процессе которой прогнозист в соответствии с заранее разработанной программой ставит перед экспертом вопросы относительно перспектив развития прогнозируемого объекта. Успех такой оценки зависит в значительной степени от способности эксперта давать заключение экспромтом по самым различным вопросам.

Аналитический метод предусматривает тщательную самостоятельную работу эксперта над анализом тенденций, оценкой состояния и путей развития прогнозируемого объекта. Эксперт может использовать всю необходимую ему информацию об объекте прогноза. Свои выводы эксперт оформляет в виде докладной записки. Основным преимуществом этого метода является возможность максимального использования индивидуальных способностей эксперта. Однако он мало пригоден для прогнозирования сложных систем и выработки стратегии из-за ограниченности знаний одного специалиста-эксперта в смежных областях знаний.

Метод написания сценария следует отнести как к индивидуальным, так и к коллективным экспертным оценкам. Сущность и основные его характеристики будут раскрыты ниже.

Наиболее достоверными являются коллективные экспертные оценки.

Для организации проведения экспертных оценок создаются рабочие группы, в функции которых входят проведение опроса, обработка материалов и анализ результатов коллективной экспертной оценки Рабочая группа назначает экспертов, которые дают ответы на поставленные вопросы, касающиеся перспектив развития данного объекта. Количество экспертов, привлекаемых для разработки прогноза, может колебаться от 10 до 150 человек, в зависимости от сложности объекта. Определяется цель прогноза, разрабатываются вопросы для экспертов. При проведении опроса необходимо обеспечить однозначность понимания отдельных вопросов и независимость суждений экспертов. После опроса осуществляется обработка материалов коллективной экспертной оценки. Окончательная оценка может определяться как среднее суждение или как среднее арифметическое значение оценок всех экспертов. Могут использоваться и другие подходы. При разработке научно-технических прогнозов методика статистической обработки материалов предусматривает использование совокупности оценок относительной важности, сделанных экспертами по каждому из оцениваемых направлений научных исследований. Оценки важности выражаются в баллах и могут принимать значения от 0 до 1, от 0 до 10, от 0 до 100 и т.д.

В мировой практике среди методов коллективных экспертных оценок наиболее широкое применение нашли: метод коллективной генерации идей, метод "635", метод "Дельфи", метод "Комиссий", метод написания сценария.

Сущность метода коллективной генерации идей (мозговой атаки) состоит в использовании творческого потенциала специалистов при "мозговой атаке" проблемной ситуации, реализующей вначале генерацию идей и последующее деструктурирование (разрушение, критику) этих идей с формулированием контр идей и выработке согласованной точки зрения. Это один из методов поиска идей, который впервые был разработан в конце 30-х годов американцем А. Осборном, стремившимся решать проблемы посредством спонтанно возникающих идей. Нечто подобное использовали 400 лет назад индийские мастера "Хинду" во время своих собраний: запрещались Ротика и дискуссии, каждый мог свободно выражать свои идеи, оценка выносилась позже.

Метод коллективной генерации идей предполагает реализацию следующих этапов. Первый этап связан с формированием группы участников "мозговой атаки" (по численности и составу) но решению определенной проблемы. Оптимальная численность группы участников находится эмпирическим путем. Наиболее продуктивными признаны группы в количестве 10 - 15 человек. На втором этапе составляется проблемная записка. Она формируется группой анализа проблемной ситуации и включает описание метода и проблемной ситуации. Третий этап - этап генерации идей. Каждый из участников имеет право выступать много раз. Критика предыдущих выступлений и скептические замечания не допускаются. Ведущий корректирует процесс, приветствует усовер шенствование или комбинацию идей, оказывает поддержку, освобождая участников от скованности. Продолжительность мозгового штурма рекомендуется не менее 20 мин и не более 1 ч в зависимости от активности участников. Четвертый этап связан с систематизацией идей, высказанных на этапе генерации. Формируется перечень идей, выделяются признаки, но которым идеи могут быть объединены, идеи объединяются в группы согласно выделенным признакам. На пятом этапе осуществляется деструктурирование (разрушение) систематизированных идей. Каждая идея подвергается всесторонней критике со стороны группы высококвалифицированных специалистов.

Метод ”635” - это одна из разновидностей "мозговой атаки". Цифры 6, 3, 5 обозначают следующее: 6 участников, каждый из которых должен записать 3 идеи в течение 5 мин. Лист ходит по кругу. Таким образом, за полчаса каждый запишет в свой актив по 18 идей, в общей сложности - 108. Структура идей четко определена. Возможны модификации метода. Этот метод широко используется в зарубежных странах (особенно в Японии) для отбора из множества идей наиболее оригинальных и прогрессивных по решению определенных проблем.

Метод ”Дельфи”. Одна из первых попыток разработать более обоснованную и строгую процедуру при экспертном прогнозировании была предпринята Т. Гордоном и О. Хелмером - сотрудниками одной из корпораций США, которые в 1964 г. опубликовали результаты обобщения и статистической обработки мнений специалистов относительно перспектив развития в ряде областей науки. Этот метод получил широкую известность под названием метод "Дельфи'. Используется он при прогнозировании развития науки и техники, инвестиций и других аспектов.

Цель метода "Дельфи" - разработка программы последовательных много- туровых индивидуальных опросов. Проводится индивидуальный опрос экспертов обычно в форме анкет-вопросников. Затем осуществляется статистическая их обработка на ЭВМ и формируется коллективное мнение группы, выявляются и обобщаются аргументы в пользу различных суждений. Обработанная па ЭВМ информация сообщается экспертам, которые могут корректировать оценки» объясняя при этом причины своего несогласия с коллективным. Эта процедура может повторяться до 3 - 4 раз. В результате происходит сужение диапазона оценок и вырабатывается согласованное суждение относительно перспектив развития объекта.

Особенности метода "Дельфи":

а) анонимность экспертов.

б) возможность использования результатов предыдущего тура опроса;

в) статистическая характеристика группового мнения.

Этот метод помогает предопределить развитие проблемных ситуаций, носящих долгосрочный характер. Наши специалисты, работающие в области научно-технического прогнозирования, также разрабатывают методы обработки экспертных оценок. Они носят название эвристических.

Метод "комиссий" - это один из разновидностей методов экспертных оценок, основанный на работе специальных комиссий. Группы экспертов за "круглым столом" обсуждают ту или иную проблему с целью согласования точек зрения и выработки единого мнения. Недостаток этого метода заключается в том, что группа экспертов в своих суждениях руководствуется в основном логикой компромисса.

Метод написания сценария основан на определении логики процесса или явления во времени при различных условиях. Он предполагает установление последовательности событий, развивающихся при переходе от существующей ситуации к будущему состоянию объекта. Своеобразным сценарием может быть описание последовательности и условий международной интеграции хозяйства стран, включающее следующие вопросы: от каких простейших форм к более сложным должен пройти этот процесс; как он повлияет на национальное хозяйство и экономические связи стран; каковы финансовые, организационные, социальные, юридические проблемы, которые могут возникнуть в ходе интернационализации хозяйства.

Прогнозный сценарий определяет стратегию развития прогнозируемого объекта. Он должен отражать генеральную цель развития объекта, критерии для оценки верхних уровней "дерева целей", приоритеты проблем и ресурсы для достижения основных целей. В сценарии отображаются последовательное решение задачи, возможные препятствия. При этом используются необходимые материалы по развитию объекта прогнозирования.

Сценарий должен быть написан так, чтобы после ознакомления с ним стала ясна генеральная цель проводимой работы в свете социально-экономических задач па прогнозируемый период.

В разработке сценария принимает участие группа специалистов Поэтому всегда возникает неопределенность, связанная с субъективностью их суждений. Ценность сценария тем выше, чем меньше степень неопределенности, т.е. чем больше степень согласованности мнений экспертов.

Сценарий в готовом виде должен быть подвергнут анализу. На основании анализа информации, признанной пригодной для предстоящего прогноза, формулируются цели, определяются критерии, рассматриваются альтернативные решения.

Широко используется при анализе и прогнозе систем прогнозный граф и "дерево целей”. Графом называют фигуру, состоящую из точек-вершин, соединенных отрезками-ребрами. "Дерево целей” - это граф-дерево, выражающее отношение между вершинами-этапами или проблемами достижения цели. Каждая вершина представляет собой цель для всех исходящих для нее ветвей.

"Дерево целей" предполагает выделение нескольких структурных или иерархических уровней. Каждая цель верхнего уровня должна быть представлена в виде подцелей следующего уровня таким образом, чтобы объединение понятий подцелей полностью определяло понятие исходной цели.

Построение "дерева целей" требует решения многих прогнозных задач: прогноза развития объекта в целом; формулировки сценария прогнозируемой цели, уровней и вершин "дерева целей"; критериев и их весов в ранжировании вершин. Эти задачи могут решаться при необходимости методом экспертных оценок. Следует отметить, что данной цели как объекту прогноза может соответствовать множество разнообразных сценариев.

Метод морфологического анализа предполагает выбор наиболее приемлемого решения проблемы из числа возможных. Его целесообразно использовать при прогнозировании фундаментальных исследований. Метод морфологического анализа включает ряд приемов, предполагающих систематизированное рассмотрение характеристик объекта. Исследование проводится по методу "морфологического ящика", который строится в виде дерева целей или матрицы, в клетках которых помещены соответствующие параметры. Последовательное соединение одного какого-либо параметра первого уровня с одним из параметров последующих уровней представляет собой одно из возможных решений проблемы. Общее количество возможных решений равно произведению числа всех параметров, представленных в "ящике", взятых по строкам. Путем перестановок и различных сочетаний можно выработать вероятностные характеристики объектов. 4.3.