Корреляция. Надежность. Валидность

Термин корреляция означает взаимосвязь. Две переменные считаются коррелирующими, если между ними существует какая-либо взаимосвязь.

Если высокие значениях одной переменной связаны с высокими значениями другой, то такая связь называется прямой или положительной корреляцией.

Если высокие значения одной переменной связаны с низкими значениями другой, то эта связь называется обратной или отрицательной корреляцией.

Чем ближе точки на графике рассеяния к диагонали, тем сильнее корреляция.

Математический способ измерения силы связи между переменными – коэффициент корреляции. Может принимать значения от –1 до +1: при полной положительной корреляции r = +1, при полной отрицательной r = –1. При отсутствии взаимосвязи между переменными r равно 0.

Для чего нужна корреляция? Корреляционный анализ делает нашу жизнь более предсказуемой

Коэффициенты корреляции и шкалы измерения Тип шкалыМера связи Переменная Х Переменная Y Номинальна я Коэффициент ассоциации Пирсона φ Критерий χ 2 НоминальнаяПорядковаяРаногово-бисериальный коэффициент R rb Номинальна я Интервальн ая или отношений Бисериальный коэффициент корреляции Пирсона R bis ПорядковаяПорядковая, интервальн ая или отношений Коэффициент корреляции Спирмена r s Коэффициент корреляции Кендалла τ Интервальн ая или отношений Коэффициент корреляции Пирсона r xy

Толкование корреляции Исследователь обнаруживает корреляцию между употреблением наркотиков подростками и их нежеланием учиться в школе и делает вывод о том, что падение учебной мотивации приводит к наркомании. Исследователь показывает, что время, которое тратится ребенком-дошкольником на ролевые игры, связано с развитием его произвольности, и после этого делается вывод о необходимости больше играть с дошкольниками в ролевые игры, т.к. это будет способствовать росту произвольного поведения. На основании выявленной корреляции между полом ребенка и его предпочтением точных или гуманитарных предметов заключается, что девочки любят литературу потому, что они девочки.

Толкование корреляции Две проблемы: направленности и третьей переменной Коэффициент детерминации - степень изменчивости одной переменной, как связанное с изменчивостью второй

Вопросы При каком из следующих значений корреляции взаимосвязь наиболее сильная? +0,81; -0,67; -0,86; +1,00 Проинтерпретируйте: Существует отрицательная корреляция между депрессией и уровнем физической подготовки. Существует положительная корреляция между объемом домашней библиотеки и средним баллом учащегося по русскому языку. Существует отрицательная корреляция между оценками и боязнью экзаменов.

Требования к психологическому измерению: надежность Надежность тестовый показатель = истинный + ошибка Ошибки: случайные и систематические. Стремимся только к случайным ошибкам.

В основе всех способов установления надежности лежат корреляционные процедуры. Под ретестовой надежностью принято понимать устойчивость результатов измерения при его повторении или при разных условиях, в которых измерение проводится. Какие проблемы могут возникнуть при установлении ретестовой надежности? При интерпретации этого коэффициента?

Эквивалентная надежность или надежность взаимозаменяемых форм Надежность эквивалентных половин теста или «надежность, найденная методом расщепления теста пополам». Как будем делить?

Внутренняя согласованность. Оценка внутренней согласованности основана на взаимной корреляции между всеми пунктами теста. Альфа Кронбаха. Коэффициент имеет смысл тогда, когда мы предполагаем, что тест измеряет одну общую характеристику. Чем более тест гомогенен, тем больше будет альфа Кронбаха.

Вывод в формате SPSS Scale Mean if Item Deleted Scale Variance if Item Deleted Corrected Item-Total Correlation Cronbach's Alpha if Item Deleted VAR , ,145,253,912 VAR , ,206,455,910 VAR , ,473,563,908 VAR , ,338,503,909 VAR , ,322,029,914 VAR , ,942,336,911 VAR , ,300,749,907 VAR , ,871,519,909 VAR , ,917,438,910 VAR , ,497,465,910 Item-Total Statistics Cronbach's AlphaN of Items,91243 Reliability Statistics

Надежность оценок экспертов Проблема Решение проблемы: читайте книжки!

Валидность Если инструмент действительно измеряет то, что собирались измерить с его помощью, и при этом не измеряет того, что им не собирались мерить, то он считается валидным. Виды или аспекты валидности

Очевидная валидность Тест должен выглядеть соответственно измеряемому конструкту

Содержательная валидность Пользователь теста должен быть уверен, что содержание теста соответствует конструкту, на измерение которого он направлен. Создатель теста должен предоставить доказательства этого соответствия. Чаще всего такого рода доказательства устанавливается в отношении тестов достижений

Еще раз. Валидность. Если инструмент измеряет то, что собирались измерить с его помощью, и при этом не измеряет того, что им не собирались мерить, то он считается валидным. ТЕСТ на самостоятель ность подростков самостоятель ность эмансипация негативизм агрессия стрессоуст ойчивость

Дивергентная и конвергентная валидизация – это общие направления валидизации Тестовые показатели валидного теста должны точно отражать особенности изучаемого конструкта. Поэтому проверить валидность можно сравнивая результаты тестирования с предполагаемыми особенностями конструкта. Отсюда…

самостоятельность Схожие конструкты Противополо жные конструкты Эмансипация Внутренний локус контроля Умение планировать Критическое мышление Инфантилизм Конформность Внешний локус контроля НА УРОВНЕ КОНСТРУКТА

НА УРОВНЕ ИЗМЕРЕНИЯ Тест на самостояте льность Тест на внутренний локус контроля Тест на конформность корреляция Что мы можем ожидать относительно корреляции пунктов этих двух измерений?

Исследование взаимосвязи с измерением теоретически «противоположного» конструкта – дивергентная валидность. Исследование взаимосвязи с измерением теоретически «схожего» конструкта –конвергентная валидность.

Критериальная валидизация При этом способе доказательства валидности теста показатели этого теста сравниваются с каким-то значением или критерием (иногда говорится «внешним критерием»). Предполагается, что если тест измеряет определенный конструкт, то результаты теста должны совпадать с результатами измерения этого же конструкта другими независимыми способами.

Что может быть внешним критерием? Фактическое поведение (реакции на стимул, ошибки, достижения и пр., что можно наблюдать). Другой тест (валидность которого известна) Экспертные оценки

Критериальная валидизация Где лежит критерий: в настоящем или в будущем?? Текущая и прогностическая валидность Проблемы критерия

Конструктная валидизация Теоретический конструкт дает нам основание ожидать определенных результатов, и если эти ожидания не подтверждаются, то сомнения могут быть отнесены сразу и к процедуре (инструменту) и к теоретическому конструкту. Валидизация теста с точки зрения того, насколько хорошо он оценивает соответствующий конструкт – это решение уравнения с несколькими неизвестными.

Конструктная валидность Никогда одно исследование не может стать причиной опровержения теоретического построения.

Валидизация по внутренней структуре теста Если измеряемый тестом теоретический конструкт имеет сложную структуру, то тестовые показатели должны факторизоваться таким образом, чтобы их факторная структура соответствовала структуре теоретического конструкта. Если получаемый результат показывает несоответствие структуры тестовых показателей и структуры изучаемого конструкта, то сомнения, опять-таки, должны быть адресованы сразу и правомерности существования конструкта с такой структурой и тесту.

Оценка внутренней структуры теста – на примере теорий личности Ганс Айзенк, Р. Кеттелл, пятифакторная теория личности… Фактор 1 Фактор 2

Валидность – это унитарный конструкт Нет отдельных видов Есть разные способы установления валидности - «А в каких целях будут использоваться результаты измерения этим тестом?» - то что определит направление валидизации Нет валидности без надежности

Что такое значение коэффициента корреляции? Как толкуется значение надежности? Как толкуется значение валидности?

Проверочные вопросы 1.Если корреляция между тестовыми показателями при первом проведении и при втором проведении 0.85, то, что можно сказать о надежности теста? 2.В каких обстоятельствах установление надежности методом тест-ретест наиболее целесообразно? 3.Почему измерение внутренней согласованности теста считается удобным способом установления надежности теста? 4.Если надежность теста 0.80, как вы можете интерпретировать это значение и использовать этот тест? 5.Найдите слабые стороны следующих критериев, по которым может валидизироваться тест: Рейтинги преподавателей, предложенные студентами, как индекс педагогических способностей. Число аварий, которые имел водитель в течение года, как индекс безопасного стиля вождения. Число аварий на последнюю тысячу километров пробега, которые имел водитель, как индекс безопасного стиля вождения.