Методы независимого интеллектуального эксперимента. Обработка и представление результатов коллективных экспертных опросов

Независимый интеллектуальный эксперимент – проводится заочно с помощью анкетирования. К числу методов независимого интеллектуального эксперимента могут быть отнесены социологические опросы, анкетирование методом Дельфи, метод ранговой корреляции и др.

Разработка анкеты экспертного опроса:

Предлагаемая экспертам анкета содержит совокупность вопросов, ответы на которые позволят сделать выводы об объекте прогнозирования. Вопросы должны логически соответствовать структуре объекта прогноза, обеспечивать единственное толкование.

По форме вопросы могут быть открытыми, закрытыми и косвенными.

Открытым называется вопрос, ответ на который не регламентирован. Например, экспертам может быть предложено, назвать пути и способы решения прогнозной задачи; проблемы, которые возникнут в процессе ее решения.

В формулировке закрытого вопроса предложены альтернативные варианты ответов, эксперт должен сделать выбор своего варианта ответа из предложенных альтернатив.

Косвенным называется вопрос, формулировка которого должна замаскировывать цель экспертизы.

Обработка и представление результатов коллективных экспертных опросов:

При прогнозировании методами коллективных экспертных оценок важно установить среднюю оценку экспертной группы, принимаемую в качестве результата экспертного опроса, оценить из каких индивидуальных оценок экспертов складывается результирующая величина, достаточно ли согласованы оценки, не является ли результат экспертизы усреднением диаметрально противоположных мнений? Для ответа на этот вопрос используют следующие показатели: среднее значение прогнозируемой величины, дисперсия, коэффициент вариации оценок.

Среднее значение прогнозируемой величины ( ) определяется по формуле:

(49), где

y_i - значение прогнозируемой величины, данное i-м экспертом,

n - число экспертов в группе.

При известных коэффициентах компетентности экспертов корректнее применять среднюю взвешенную оценку, используя в качестве весов коэффициенты компетентности (50).

(50)

Дисперсия значений прогнозируемой величины (D):

(51)

Cреднеквадратическое отклонение индивидуальных экспертных оценок (s):

(52)

Коэффициенты вариации оценок, данных экспертами (v):

(53)

Следует иметь в виду, что данные показатели оценивают качество прогнозных оценок, исходя из предположения, что согласованность ответов экспертов гарантирует достоверность оценок. На практике возможны случаи, когда отдельные эксперты, не согласные с мнением большинства, давали правильные оценки.

9.4. Метод Дельфи: область применения, правила проведения, статистическая обработка результатов анкетирования

Метод Дельфи - метод коллективного экспертного поискового прогнозирования, основанный на выявлении согласованной оценки экспертной группы путем анонимного опроса экспертов в несколько туров, предусматривающий сообщение экспертам результатов предыдущего тура с целью дополнительного обоснования оценки экспертов в последующем туре.

При использовании метода Дельфи следует учитывать:

1) группы экспертов должны быть стабильны и численность их должна удерживаться в благоразумных рамках;

2) время между турами должно быть не более месяца;

3) вопросы в анкетах должны быть тщательно продуманы и четко сформулированы;

4) число туров должно быть достаточным, чтобы обеспечить всех участников возможностью ознакомиться с причиной той или иной оценки, а также критики этих причин;

5) должен проводиться систематический отбор экспертов;

6) необходимо иметь самооценку компетенции экспертов по рассматриваемым проблемам;

7) следует установить влияние различных видов передачи информации экспертам по каналам обратной связи;

8) необходимо установить влияние общественного мнения на экспертные оценки и на сходимость этих оценок.