Методы экспертных оценок

Применяются две формы экспертных оценок: индивидуальная и коллективная.

Индивидуальные экспертные методыоснованы на использовании мнений экспертов-специалистов независимо друг от друга. Наиболее распространены два метода такой оценки: интервью и аналитические экспертные оценки. Основными преимуществами рассматриваемых методов являются возможность максимального использования индивидуальных особенностей эксперта и незначительность психологического давления, оказываемого на отдельного работника. Однако эти методы мало пригодны для решения сложных комплексных задач из-за ограниченности знаний одного специалиста-эксперта.

Коллективные экспертные методы основываются на принципе выявления коллективного мнения экспертов по изучаемому вопросу. Наиболее распространенными коллективными методами экспертной оценки являются метод «мозговой атаки» (метод коллективной генерации идей) и метод Дельфи. Применяются также методы эвристического прогнозирования (МЭП), программного прогнозирования, морфологического анализа, построения прогнозных сценариев, прогнозных графов и «дерева целей», матричный метод.

Основной особенностью метода «мозговой атаки» («мозгового штурма»)является запрет на критику выдвигаемых идей в процессе их коллективного обсуждения. Установлено, что процесс выдвижения новых идей не является независимым от процесса их оценки. Более того, чем меньше эти процессы взаимосвязаны, тем более успешно происходит генерация идей. Хотя при этом могут появляться как правильные, так и ложные идеи. Исследования эффективности «мозговых атак», проведенных в университете Буффало (США), показали, что групповое мышление производит на 70 % больше ценных новых идей, чем сумма индивидуальных предложений. Имеет место цепная реакция идей, когда каждая идея, высказанная одним участником, вызывает новые идеи у других участников обсуждения. Таким образом, метод «мозговой атаки» активизирует творческий потенциал коллектива специалистов. Этому способствует также непринужденная обстановка при обсуждении, состав группы (в нее входят люди творческие, способные генерировать новые идеи), четкость формулировки цели и имеющихся трудностей ее достижения. На каждом заседании продолжительностью 1–1,5 часа перед участниками (10–15 человек) целесообразно ставить достаточно узкую задачу, разбивая сложную проблему на составные части. Недостатком метода может быть то, что некоторые эксперты в процессе открытого обсуждения могут идти на компромисс.

Этого недостатка в значительной степени лишен метод Дельфи.

Метод Дельфибыл разработан в 1962–1964 годах специалистами фирмы RAND Corporation (США) О. Хеммером и Т. Гордоном. Особенностью метода является то, что эксперты излагают свое мнение не в открытом обсуждении, а анонимно, заполняя анкеты. Затем каждому эксперту сообщаются обобщенные результаты анкетирования, и предлагается уточнить свое мнение и обосновать оценки, отличные от мнения большинства. Эта процедура повторяется 3–4 раза. В результате происходит сужение диапазона оценок. Каждый эксперт получает возможность более обоснованно, с учетом большего числа факторов и в определенной степени не подпадая под влияние авторитетов, произвести оценку изучаемого объекта. Недостатком этого метода является отсутствие учета влияния на экспертов составителей анкет.

Формирование экспертной группы — наиболее ответственный момент в организации экспертизы. Поиск специалистов по данному вопросу может производиться по публикациям или путем опроса известных специалистов.

После бесед со специалистами, получения их согласия на участие в работе команды следует выполнить количественную оценку качества экспертов. Методытакой оценки подразделяют на группы: эвристические (оценка эксперта производится им самим или другими экспертами); статистические (по данным обработки суждений проверяемых экспертов); тестовые (по результатам испытаний психофизиологических особенностей эксперта); документальные (по анкетным данным эксперта, учитывающим количество публикаций и изобретений, участие в конференциях, занимаемую должность, ученые степень и звание и т. п.); комбинированные (с помощью любой совокупности указанных методов).

Организация работы экспертов может быть программированной (ответы на вопросы анкет) или непрограммированной (свободное изложение по заданной теме), осуществляться в устной (интервью) либо в письменной форме. Вопросы экспертных анкет могут быть открытыми (без вариантов ответов) и закрытыми (с вариантами ответов), прямыми и косвенными. Косвенные вопросы используют в тех случаях, когда требуется замаскировать цель экспертизы для увеличения ее объективности.