Подготовка к проведению экспертного опроса

Во время подготовки экспертизы исследователь: осуществляет предварительную разработку схемы экспертизы; конкретизирует выделенные параметры (свойства) для оценивания альтернатив; осуществляет подбор экспертов.

Как правило, при экспертном опросе используются групповые методы, в которых экспертизу производит группа экспертов. Точность групповой оценки зависит от числа экспертов в группе. Уменьшение их числа ведет к снижению точности, т. к. на групповую оценку излишнее влияние оказывает оценка каждого из экспертов. В то же время при очень большом числе экспертов становится сложнее выявить их согласованное мнение из-за уменьшения роли тех суждений, которые хотя и отличаются от мнения большинства, однако далеко не всегда оказываются ошибочными. В книге Бешелева С. Д., Гурвича Ф. Г. «Математико-статистические методы экспертных оценок» (М.: Статистика, 1974 г.) показана зависимость, позволяющая оценить необходимое число экспертов в группе в зависимости от допустимой групповой ошибки (рис. 5). Средняя групповая ошибка оценивается в размере половины доверительного интервала, поделенного на среднюю оценку.

Рис. 5.

Данный рисунок показывает, что точность экспертизы зна­чительно падает, когда в экспертной группе меньше 10 экспер­тов. Не следует также число членов группы выбирать больше 20, т.к. точность оценки в этом случае возрастает незначи­тельно. Нужно при этом помнить, что кривая не носит универ­сального характера и обусловлена специфическими особенностя­ми каждой экспертизы.

Для отбора экспертов, как правило, используют тестиро­вание, в ходе которого проверяются их знания в области про­водимой экспертизы и также выявляются качества, которыми должен обладать эксперт. В таких тестах может применяться самооценка.

При подборе экспертов следует учитывать их заинтересо­ванность в результатах экспертизы. Наиболее благоприятными являются те эксперты, которым безразличен результат проводи­мой экспертизы.

В зависимости от степени компетентности экспертовиммогутприсваиваться веса, которые затем учитываются при обработке результатов экспертного опроса.

Процедура проведения экспертизы предполагает возможность взаимодействия экспертов между собой. Различают три вида взаимодействия:

- эксперты свободно обмениваются информацией между собой;

- обмен информацией между экспертами строго регламентирован;

- эксперты изолированы друг от друга.

Примером первого вида взаимодействия является экспертный опрос методом круглого стола.

Некоторая регламентация взаимодействия, например полный запрет критики, краткость высказывания своих суждений используется в методе мозговой атаки.

В методе Дельфи полностью запрещается взаимодействие в ходе проведения отдельных туров экспертного опроса. По результатам проведенного тура аналитиками, проводящими экспертный опрос, получаются результирующие оценки, которые предъявляются экспертам. Данные оценки используются экспертами в следующих турах для уточнения своих оценок. Таким образом, применяется механизм обратной связи (см. рис.1) позволяющий увеличить согласованность оценок экспертов.

В зависимости от множества допустимых оценок альтерна­тив, вида функции j, организации взаимодействия экспертов между собой и организации обратной связи различают методы проведения экспертизы [12].