Способы оценки компетентности экспертов

Оценка компетентности экспертов может быть осуществлена различными методами, например:

а) по частоте цитирования или количеству публикаций эксперта;

б) по результатам оценки ранее выполненных прогнозов;

в) по результатам самооценки;

г) по результатам взаимооценки.

Оценка компетентности экспертов по частоте цитирования достаточно часто применяется за рубежом и значительно реже в отечественной практике. Предпосылкой применения этого метода является доступность научных публикаций широкому кругу специалистов и соблюдение норм авторского права. Сравнивая количество ссылок на работы того или иного специалиста, можно сделать вывод о его популярности в среде коллег.

Рассмотрим последовательность работ по формированию экспертной группы и оценке компетентности экспертов методом взаимооценки.

В качестве первого этапа выступает формирование генеральной совокупности экспертов - банка данных обо всех признанных специалистах в данной области. С этой целью 10 экспертам рассылаются анкеты с просьбой назвать 10 наиболее компетентных специалистов в прогнозируемой области. Затем всем вновь названным рассылаются аналогичные анкеты. Процедура продолжается до тех пор, пока в анкетах будут появляться новые имена.

Следующий этап - оценка компетентности экспертов. Составляется рабочая таблица - "Матрица оценки компетентности экспертов первого порядка" (Табл. 23), по результатам которой рассчитываются коэффициенты компетентности экспертов первого порядка (46).

K¹_j = (46)

По результатам этих расчетов строится матрица оценки коэффициентов компетентности экспертов второго порядка (Табл. 24), оценки в которой взвешиваются с учетом компетентности эксперта, давшего оценку и рассчитывается коэффициент компетентности экспертов второго порядка (47).

К²_{j =} (47)

Таблица 23