Расчет критериальной валидности

Наилучшим и самым простым способом определения критериальной валидности является вычисление дихотомической корреляции (есть признак – нет признака) между итоговом баллом по шкале и принадлежностью к критериальной группе. Например, если разрабатывается опросник прогноза алкоголизации, то такой критериальной группой будет группа алкоголиков.

Определение критеральной валидности очень существенно при профессиональном отборе. А именно, результаты анализа профессиональной деятельности (профессиографии) выступают критерием валидности профессионального тестирования, на основе которого происходит соотнесение действий и операций, оцениваемых с помощью тестов, с действиями и операциями, входящими в структуру профессиональной деятельности. При этом профессиография есть метод изучения требований, которые предъявляет та или иная профессиональная деятельность к профессионально важным качествам личности. В качестве критериев профессиональной деятельности могут использоваться различные показатели (обучаемость профессиональным знаниям и навыкам, показатели деятельности работника, его вклад в результат деятельности всего коллектива). В частности, могут использоваться: прямые показатели эффективности (качество и производительность), тесты профессиональной подготовленности, административные акты, отражающие профессиональную пригодность (дисциплинарные взыскания, поощрения, продвижение по службе и др.), текучесть кадров, несчастные случаи и происшествия по вине работника, экспертные оценки и самооценки эффективности деятельности и др. Собственно анализ профессиональной деятельности включает в себя три этапа: сбор информации о профессиональной деятельности; обработку и обобщение полученной информации (составление профессиограммы); использование профессиограммы (выбор критериев успешности профессиональной деятельности, подбор тестов для ее оценки и прогнозирования, классификация профессий, что необходимо прежде всего для целей профконсультации, и т.д.). Информация о профессиональной деятельности может быть получена разными путями. Большое значение имеет наблюдение за деятельностью специалистов, из которого можно получить сведения о: типах обрабатываемой информации, эмоциональной напряженности, особенностях общения с другими работниками, условиях внешней среды, соответствии реальной работы инструкциям и наставлениям, межиндивидуальных вариациях в выполнении одних и тех же обязанностей. Другим путем получения данных о профессиональной деятельности является беседа со специалистами. Она позволяет использовать многолетний опыт работы специалистов, которые знают примеры успешной и неуспешной работы и понимают факторы, определяющие различия в эффективности профессиональной деятельности. Сама профессиограмма представляется в различных формах. Например, в виде описательной характеристики профессиональной деятельности, в которой отражаются общие ее особенности, основные действия и операции, их последовательность и взаимообусловленность, необходимая специальная подготовка, требующиеся знания и навыки, режим труда и отдыха, санитарно-гигиенические условия, характерные психофизиологические состояния (монотония, утомление, эмоциональная напряженность), объем и характер перерабатываемой информации, физическая тяжесть труда, технологические аспекты профессиональной деятельности, используемое оборудование и пр. Одним из методов построения профессиограммы является инженерно-психологический анализ деятельности, в основе которого лежит определение алгоритма решения задачи специалистом (для чего используется интервью, наблюдение, хронометрирование деятельности) с последующим определением того, какие психофизиологические функции и личностные характеристики обеспечивают каждый участок алгоритма. При построении профессиограммы важно, чтобы описательные характеристики были дополнены количественной оценкой элементов профессиональной деятельности, представленных совершаемыми действиями и операциями (восприятие информации, принятие решений, общение, типичные движения и пр.). В частности, за рубежом большое распространение получил опросник PAQ (Position Analysis Questionnaire), предназначенный для оценки 182 элементов профессиональной деятельности, объединенных в шесть категорий: вид предъявляемой информации (например, печатный текст), процесс ее обработки (кодирование), рабочие действия (работа на пульте управления), взаимодействие, общение с другими работниками (речевой обмен), условия труда (уровень шума), прочие характеристики профессиональной деятельности (ответственность за безопасность других участников производства). С помощью этой методики конкретная профессия оценивается экспертами с помощью оценочных шкал, в которых используются такие критерии, как: значимость для достижения цели деятельности, затрачиваемое время, вероятность опасности, степень использования, характерность элемента для профессии и специальные шкалы для отдельных элементов. При составлении профессиограммы необходимо учитывать динамику профессий: во многих профессиях распределение обязанностей работника является временным; по мере накопления его практического опыта оно зачастую меняется настолько, что для успеха оказывается нужными совсем иные способности и навыки. Кроме того, характер выполняемой работы меняется под воздействием технологических изменений, которые приводят к смене требуемых с самого начала навыков на новые. В силу этого профессиограммы должны включают в себя такой фактор, как способность учиться новому [Кулагин Б.В., 1984], [Осберн Х., 1991].