Методические указания

Методы организации сложных экспертиз. Рассмотренные выше недостатки экспертных оценок привели к необходимости создания методов, повышающих объективность получения оценок путем расчленения большой первоначальной неопределенности пробле­мы, предлагаемой эксперту для оценки, на более мелкие, лучше поддающиеся осмыслению.

В качестве простейшего из этих методов может быть использо­ван способ усложненной экспертной процедуры, предложенный в методике ПАТТЕРН. В этой методике выделяются группы критериев оценки и рекоменду­ется ввести весовые коэффициенты критериев. Введение критериев позволяет организовать опрос экспертов более дифференцировано, а весовые коэффициенты - повышают объективность результи­рующих оценок.

Развитием этого метода является введение коэффициентов компетентности экс­пертов и различные методы совершенствования обработки оценок, даваемых раз­ными экспертами по различным критериям.

Метод решающих матриц. Идея этого метода была предложена Г.С.Поспеловым как средство стратифици­рованного представления проблемы с большой неопределенностью на подпроблемы и пошагового получения оценок.

Например, при создании сложных производственных комплек­сов, реализации крупных проектов и организации решения других аналогичных проблем нужно определить влияние на проектируе­мый объект фундаментальных научно-исследовательских работ, чтобы запланировать эти работы, предусмотреть их финансирова­ние и распределить средства между ними.

Получить от экспертов объективные и достоверные оценки вли­яния фундаментальных НИР на проектирование сложного объекта практически невозможно.

Для того, чтобы облегчить экспертам эту задачу, можно внача­ле спросить их, какие направления (области) исследований могут быть полезны для создания комплекса (или какие подпроблемы нужно решить для реализации всей проблемы) и попросить опреде­лить относительные веса этих направлений (подпроблем) a₁, ..., a_na. Затем - составить план опытно-конструкторских работ для полу­чения необходимых результатов по названным направлениям и оценить их вклад b₁, ..., b_nb. Далее нужно определить перечень при­кладных научных исследований и их относительные веса g₁, ..., g_ng. И, наконец, - оценки влияния фундаментальных НИР на приклад­ные d₁, ..., d_nd.

Таким образом, область работы экспертов представляется в виде нескольких уровней: направления (подпроблемы)  ОКР  прикладные НИР  фундаментальные НИР (рис. 4.1).

Рис. 4.1

Относительные веса по всем уровням должны быть нормированы. В методе решающих матриц для удобства опроса экспертов относительные веса определяются не в долях единицы, а в процентах, и нормируются по отношению к 100:

. (4.1)

Непосредственно экспертами оцениваются только веса направлений (подпроблем), остальные относительные веса вычисляются. Эксперты оценивают вклад каждой альтернативы (ОКР, НИР) в реализацию элементов более высокого уровня, непосредственно предшествующего уровню данной альтернативы. Так, вклад ОКР в реализацию направления (подпроблемы) оценивается некоторой величиной p_ij. Естественно, для каждой ОКР относительные веса также нормированы:

. (4.2)

Таким образом, каждая строка решающей матрицы характеризует относительный вклад i-й ОКР в реализацию каждой из j-x подпроблем.

Оценив предварительно a₁, ..., a_na, и используя решающую матрицу |p_ij| можно получить относительные веса ОКР:

. (4.3)

Аналогично, зная b_i и оценив |p_kj|, можно получить относительные веса прикладных НИР g_k, а затем - и фундаментальных НИР d_y.

В результате при использовании метода решающих матриц оценка относительной важности сложной альтернативы сводится к последовательности оценок более частных альтернатив, что обеспечивает их большую достоверность при прочих равных условиях.

Иными словами, большая неопределенность, имевшая место в начале решения задачи, как бы разделена на более "мелкие", лучше поддающиеся оценке, в соответствии с одной из основных идей системного анализа.

При применении метода решающих матриц в особо сложных ситуациях целесообразно создавать и накапливать, базы данных о возможных фундаментальных, прикладных НИР и ОКР, проводимых в стране и за рубежом по проблемам, аналогичным или смежным с рассматриваемой, и анализировать их влияние друг на друга в соответствии с методом решающих матриц.

Метод решающих матриц применялся для реализации крупных дорогостоящих проектов (космос, оборона, фундаментальные научные исследования и т. п.), при создании, реконструкции, конверсии предприятий или научно-исследовательских организаций, инвестируемых государством, т. е. в ситуациях, для которых повышаются требования к тщательности анализа факторов, влияющих на принятие решений.

Используя метод решающих матриц и сформировав многоуровневую структуру факторов, влияющих на создание и функционирование предприятий (организаций), можно провести более тщательный анализ вклада конкретных факторов нижнего уровня этой структуры (многие из которых могут быть количественно оценены с помощью детерминированных или вероятностных характеристик) на процесс проектирования и функционирования предприятия.

Реализация методов организации сложных экспертиз - достаточно трудоемкая задача, которую можно облегчить с помощью автоматизации получения и обработки оценок в диалоговом режиме.

Процедуры должны предоставлять пользователю возможность ввода количества оцениваемых составляющих и критериев оценки (для первого из рассмотренных методов) и количество уровней, составляющих и оценок для каждого из них (для метода решающих матриц).