Валидность психодиагностического инструментария

Другим после надежности ключевым критерием оценки качества методик является валидность. Вопрос о валидности решается лишь после того, как установлена достаточная ее надежность, поскольку ненадежная методика не может быть валидной. Но самая надежная методика без знания ее валидности является практически бесполезной.

Следует отметить, что вопрос о валидности до сих пор представляется одним из самых сложных. Наиболее укоренившимся определением этого понятия является то, которое приведено в книге А. Анастази: «Валидность теста - понятие, указывающее нам, что тест измеряет и насколько хорошо он это делает».

Валидность (с англ. действенный, пригодный, имеющий силу) — это комплексная характеристика методики, которая включает сведения об области исследования явлений и репрезентативности диагностической процедуры по отношению к ним.

Валидность — это комплексная характеристика, включающая, с одной стороны, сведения о том, пригодна ли методика для измерения того, для чего она была создана, а с другой стороны, какова ее действенность, эффективность, практическая полезность.

В стандартных современных требованиях к психологическим тестам валидность определяется как комплекс сведений о том:

- относительно каких групп психических свойств личности могут быть сделаны выводы с помощью конкретной методики, т.е., «что мы изучаем»;

- о степени обоснованности выводов при использовании конкретных тестовых оценок или других форм оценивания «насколько хорошо методика изучает психическое явление».

Валидность рассматривается как обязательная и включает в себя данные о степени согласованности результатов теста с другими сведениями об обследуемой личности, но полученными из других достоверных источников (теоретические ожидания, наблюдение, экспертные оценки, результаты других методик, достоверность которых установлена и т.д.). Валидность описывает также конкретную направленность методики (контингент испытуемых по возрасту, образовательному уровню, социально-культурной принадлежности и т.д.) и степень обоснованности выводов в конкретных условиях использования теста.

С методологической точки зрения валидность является основной гносеологической проблемой психодиагностики. Надежность — это необходимое, но недостаточное условие валидности. Эти два понятия тесно связаны между собой, но они не пересекаются, т.к. надежность — это устойчивость процедуры относительно объекта исследования, а валидность -— это устойчивость, но относительно измеренных свойств предмета. Между ними нет прямо пропорциональной зависимости и, следовательно, повышение надежности не свидетельствует о повышении валидности. Каждая методика имеет четко определенную валидность. Большинство методик позволяют определить валидность по отношению к нескольким психическим характеристикам.

Как видно из вышеизложенного в понятие валидности входит большое количество самой разнообразной информации о тесте. Различные категории этих сведений и способы их получения образуют виды валидности.

Виды валидности

Конструктная валидность — это один из основных видов валидности, который отражает степень репрезентации исследуемого психологического конструкта в результатах теста. Степень обоснованности теории, положенной в основу создания данного теста.

Она устанавливается путем доказательства правильности теоретических концепций, положенных в основу теста. Обращение к концептуальной валидности необходимо в тех случаях, когда результаты тестовых измерений используются не просто для предсказания поведения, а как основа выводов о том, в какой степени испытуемые обладают некоторой определенной психологической характеристикой. Причем измеряемая психологическая характеристика не может быть отождествлена с какой-либо наблюдаемой особенностью поведения, а представляет собой теоретическую концепцию. Примерами таких концепций являются интеллект, черты личности, мотивы, установки и т.д.

Т.к. проявление таких конструктов в деятельности человека многообразны и неоднозначны с точки зрения их выделения, то установление конструктной валидности является сложным процессом.

Важнейшим аспектом конструктной валидности является внутренняя согласованность, отражающая то, насколько определенные пункты (т.е. задания, вопросы), составляющие материал теста, подчинены основному направлению теста как целого, ориентированы на изучение одного и того же явления. Одним из компонентов концептуальной валидности является валидность по возрастной дифференциации. Она связана с возрастной динамикой исследуемого качества.

Среди конкретных методов определения конструктной валидности выделяется: сопоставление исследуемого текста с другими методиками, конструктное содержание которых известно. Корреляции между результатами двух тестов должны показывать, что разработанный тест измеряет примерно ту же сферу или то же явление, что и эталонная методика, т.к. в данном случае не требуется высокой степени связи между этими двумя тестами. Смысл процедуры конструктной валидности состоит как в установлении одновременно сходства двух методик, так и их различия.

При анализе конструктной валидности осуществляется подтверждение совокупности теоретически ожидаемых связей, которые, в свою очередь, определяются следующими подходами:

1) конвергентная валидность (проверка степени близости прямой и обратной связи);

2) дискриминантная валидность (установление отсутствия связи);

3) факторная валидность, позволяющий строго статистически проанализировать следующие моменты:

Особое место в процедуре определения конструктивной валидности занимает факторный анализ, позволяющий строго статистически проанализировать структуру связей показателей исследуемого теста с другими известными и латентными (скрытыми) факторами, выявить общие и специфические для группы сопоставляемых тестов факторы, степень их представленности в результатах, т.е. определить факторный состав и факторные нагрузки результата теста (факторная валидность).

Критериальная валидность — комплекс характеристик, включающий валидность текущую и прогностическую и отражающий соответствие диагноза и прогноза определенному кругу критериев измеряемого явления.

В качестве критерия валидизации может выступать проверенный тест, общепризнанная теория, уровень достижения в какой-либо деятельности. Так, критериальная валидность личностного опросника для измерения социальной интроверсии может быть определена на основании сопоставления результатов теста с экспертными оценками хорошо знающих обследуемого лиц, с результатами наблюдения за проявлениями этой особенности в его поведении, с объективными сведениями о круге общения. При валидизации тестов достижений результат измерений сравнивается с мнением педагогов о знаниях обследуемого в определенной области, с академическими оценками, контрольными проверками и т.д. В случае валидизации профориентационных тестов тестовые оценки сравниваются как с экспертными оценками коллег и руководителей, так и с объективными показателями достижений в профессиональной сфере. Тест может иметь столько показателей валидности, сколько критериев. Критерий должен быть объективным, бесспорным и легко определяемым и надежным.

Критериальная валидность включает как комплекс связей с текущим состоянием изучаемого явления, так и вероятность и обоснованность прогноза о его состоянии в будущем.

Показатели текущей валидности демонстрируют степень репрезентативности характеристик изучаемого психического явления в результате теста, т.е. этот показатель демонстрирует представлено ли психическое свойство, которое мы изучаем.

Прогностическая валидность — это информация о том, с какой степенью точности и обоснованности методика позволяет судить о диагностируемом психологическом качестве, спустя некоторое время после измерения. Она отражает временной интервал, на который распространяется обоснование такого суждения.

Содержательная валидность — это один из основных видов валидности методики, характеризующий степень репрезентативности содержания заданий теста измеряемой области психических свойств. Эта валидность имеет большее значение для тестов, исследующих деятельность, близкую или совпадающую с реальной (чаще учебной или профессиональной деятельность). Поэтому одной из важнейших задач создания адекватной модели тестируемой деятельности является подбор таких заданий, которые будут охватывать главные аспекты изучаемого феномена в правильной пропорции к реальной деятельности в целом.

Эта валидность закладывается в тест еще при подборе заданий для

конструирования теста. Первый этап — определение перечня исследуемых свойств и видов деятельности, разделение какой-либо сложной способности на элементы (учебная деятельность складывается из умения слушать и запоминать). Второй этап — разработка собственно модели тестовой деятельности на основе наиболее важных элементов. Третий этап — проведение анализа степени соответствия разработанной модели реальной деятельности, т.е. соответствует ли модель той деятельности, которая диагностируется. Задания теста оцениваются экспертами по принципу их близости к реальным требованиям. Эксперты выносят суждение о том, охватывает ли тест репрезентативную выборку конкретных навыков и знаний исследуемой области

обучения.

Использование экспертных оценок сближает содержательную валидность с

процедурой определения критериальной валидности. Однако существенным различием между данными типами валидности является то, что экспертные оценки при анализе содержания являются критерием самого теста, в то время, как при критериальной валидизации они относятся к испытуемым из выборки стандартизации.

Показатель валидности — это количественное и качественное определение того, насколько методика адекватно измеряет исследуемый признак личности.

Для вычисления количественного показателя - коэффициента валидности -

сопоставляются результаты, полученные при применении диагностической методики, с данными, полученными по внешнему критерию у тех же лиц, используются разные виды линейной корреляции. Достаточно того, чтобы коэффициент валидности был статистически значим, низким признается коэффициент валидности порядка 0,20 - 0,30 , средним - 0,30 - 0,50 и высоким - свыше 0,60.
Тема 7. Психодиагностика черт

План

1. Понятие черт личности

2. Психодиагностика конституциональных диспозиций (тип нервной системы, темперамент)

3. Измерение социально обусловленных диспозиций (характера)

1. Понятие черт личности

Подавляющее большинство психодиагностических методов, применяемых на практике, использует по отношению к человеку язык описания, аналогичный принятому в естественных науках. Человек, как объект в естественных науках, предстает в этом языке в виде набора параметров, который еще с начала 20 в. принято называть «профилем личности». Каждый отдельный показатель из «профиля» обычно называется «чертой». В разных ситуациях, предъявляющих разные требования к индивиду, актуализируются разные черты: ситуации, требующие особой тщательности и внимания, провоцируют проявление черт «внимательный-невнимательный», «аккуратный- небрежный»; ситуации встречи людей или знакомства друг с другом провоцируют проявление «общительности-замкнутости» и т.д.

Чтобы получить возможность прогнозировать поведение человека в максимально широком классе возможных ситуаций, психологи стремятся измерять так называемые универсальные, или базовые, черты. Эти черты относятся, как правило, к наиболее общим структурно-динамическим характеристикам стиля деятельности и описываются в понятиях «свойств темперамента» или в понятиях «свойств нервной системы».

Таким образом, опираясь на уже известные и принятые в литературе различения трех уровней психической регуляции — организмического, индивидного и личностного (Столин В.В., 1983) можно сформулировать рабочее определение «черты».

Черта — определенная переменная, которая фиксирует такую стратегию поведения человека, которая складывается под действием системы организмического, социально-нормативного и личностного уровней регуляции.

По происхождению и сфере приложения можно выделить 3 класса черт.

1 класс. Конституциональные черты обусловлены свойствами организма и задают ограничения для максимально широких классов ситуаций. Фундаментально получены от предков, имеют основное воздействие и базовый уровень.

2 класс. Индивидуальные черты обусловлены опытом жизнедеятельности личности в относительно широких социально-нормативных ситуациях (пример взрослых, опыт близкого и дальнего социума и др.).

3 класс. Личностные черты обусловлены внутренней работой личности, характеризуются объемностью по анализу и проектированию собственного поведения (рефлексивно-ситуационные черты личности).

Обычно три типа черт рассматриваются строго иерархически. Однако более убедительной на сегодня можно считать континуально-иерархическую модель черт личности.

2. Психодиагностика конституциональных диспозиций (тип нервной системы, темперамент)

Аппаратурные методы диагностики свойств нервной системы.

Опросник типов нервной системы Я. Стреляу для оценки трех базовых характеристик темперамента: сила возбуждения, сила торможения, подвижность нервных процессов.

Личностный опросник Грея-Уилсон (ЛОГУК) для диагностики двух нейропсихо логических систем - торможения и активации поведения.

Опросник структуры темперамента (ОСТ) В.М. Русалова для оценки 4 наследственных характеристик темперамента — эргичности, пластичности, темпа, эмоциональности — в контексте деятельности и социального взаимодействия.

Личностный опросник Г. Айзенка для измерения трех характеристик темперамента: экстраверсии, интроверсии, нейротизма.

Опросник «Формула темперамента» А. Белова для определения выраженности четырех типов темперамента.

Методика изучения свойств нервной системы Б.А. Вяткина для оценки трех свойств нервной системы: силы по возбуждению, силы по торможению, подвижности нервных процессов.

Наблюдение в изучении свойств нервной системы (схемы наблюдения М.К. Акимовой и Т.В. Козловой)

3. Измерение социально обусловленных диспозиций (характера)

Многофакторные личностные опросники для работы с нормальными взрослыми популяциями:

Факторные личностные опросники Р.Кеттелла для диагностики разных аспектов личности: особенностей коммуникативной сферы, эмоционально-волевой регуляции поведения, степени социальной адаптации, склонности к асоциальному поведению, наличие эмоциональных, личностных проблем, лидерского, творческого потенциала. Взрослый (16PF) (16 факторов), подростковый (HSPQ) и детский (CPQ) (12 факторов) варианты опросника. Недостатки опросников Р.Кеттелла.

Методика «15 личностных факторов» (15ЛФ) А.Г. Шмелева и ее преимущества.

Пятифакторный личностный опросник П. Коста и Р. МакКрэя для оценки пяти фундаментальных характеристик личности: экстраверсии, конформности,

сознательности, эмоциональной стабильности и открытости новому опыту.

Многофакторные клинические методики исследования личности:

MMPI (Minnesota Multiphase Personality Inventory) для исследования индивидуально-психологических особенностей личности, типичных способов поведения и содержания переживаний в значимых ситуациях, адаптивных и компенсаторных возможностей в условиях стресса, для оценки психического и соматического здоровья, эмоционального состояния и профессиональных способностей.

Основные шкалы: ипохондрия, депрессия, истерия, психопатия, мужественность - женственность, паранойя, психоастения, шизофрения, гипомания, социальная интроверсия.

Стандартизированная многофакторная методика исследования личности (СМИЛ) Л.Н. Собчик.

Методика многостороннего исследования личности (ММИЛ) Ф.Б. Березина, М.П. Мирошникова, Е.Д. Соколовой.

Mini-Mult - сокращенный вариант MMPI (70 вопросов).