ВУЗ: Не указан
Категория: Не указан
Дисциплина: Не указана
Добавлен: 09.10.2024
Просмотров: 62
Скачиваний: 0
-
Валидность — мера соответствия того, насколько методика и результаты исследования соответствуют поставленным задачам. В частности, валидность считается фундаментальным понятием экспериментальной психологии. Как в экспериментальной психологии, так и в статистике валидное измерение — такое измерение, которое измеряет то, что оно должно измерять. То есть, к примеру, при валидном измерении интеллекта измеряется именно интеллект, а не что-то другое. Безупречный эксперимент (возможный лишь в теории) будет обладать безупречной валидностью: он будет точно показывать, что экспериментальный эффект был вызван изменением независимой переменной, он будет полностью соответствовать реальности, его результаты можно обобщить без ограничений. Когда говорят о степени валидности, рассматривается то, насколько результаты исследования соответствуют поставленным задачам (однако при этом валидность не измеряется в каких-либо условных единицах). Внутренняя валидность — вид валидности, степень влияния независимой переменной на зависимую переменную. Это понятие введено в экспериментальную психологию немецким ученым Кеппелом. Он вводит такое понятие как идеальный эксперимент, под которым понимается изменение экспериментатором только независимых переменных, эквивалентность испытуемых (каждый человек – идеальный вариант и он будет давать одинаковый результат), неизменность временных характеристик. Под валидностью понимают – достоверность результатов, которую обеспечивает реальный эксперимент по сравнению с идеальным. Внутренняя валидность тем выше, чем больше вероятность того, что изменение зависимой переменной вызвано изменением именно независимой переменной (а не чего-либо ещё). Чем больше влияние на изменение зависимой переменной неконтролируемых исследователем условий, тем ниже внутренняя валидность, и тем больше вероятность того, что факты, обнаруженные в эксперименте, являются артефактами. Данное понятие можно рассматривать как междисциплинарное: оно широко применяется в экспериментальной психологии, а также в других сферах науки. При обладающем внутренней валидностью исследовании исследователь уверен, что результаты, полученные измерением зависимой переменой, непосредственно связаны с независимой переменной, а не с каким-нибудь другим неконтролируемым фактором. Однако, фактически, в науке (особенно в психологии) невозможно со стопроцентной уверенностью утверждать, что внутренняя валидность соблюдена. Например, невозможно изучить какой-то психический процесс отдельно от психики в целом. Поэтому всегда при любом психологическом эксперименте учёный может лишь максимально (но не абсолютно) удалить или минимизировать разнообразные факторы, угрожающие внутренней валидности. Внешняя валидность — вид валидности, определяющий то, насколько результаты конкретного исследования можно распространить на весь класс подобных ситуаций/явлений/объектов. Данное понятие можно рассматривать как междисциплинарное: оно широко применяется в экспериментальной психологии, а также в других сферах науки. Внешняя валидность определяет то, в какой мере результаты, полученные в эксперименте, могут соответствовать тому типу жизненной ситуации, которая была исследована, и то, насколько возможно обобщить эти результаты на все подобные жизненные ситуации. Как и в отношении любой другой валидности, о внешней валидности в исследовании, вероятно, невозможно сказать, что она абсолютно соблюдена, можно указать только на её нарушение. Абсолютным соблюдение внешней валидности считалось бы тогда, когда результаты исследования можно обобщить на любые популяции при любых условиях и в любое время, поэтому учёные говорят не о соблюдении либо несоблюдении внешней валидности, а о степени её соблюдения. Чтобы исследование обладало наивысшей степенью валидности, должна существовать возможность генерализации его результатов на другие популяции, другие условия, другое время. Чтобы увеличить степень внешней валидности, в исследованиях могут не ограничиваться лишь экспериментальным методом, но также использовать и другие — например, наблюдение, межкультурные исследования и т. д. При современном научном подходе в психологии соблюдение внешней валидности в исследованиях играет ведущую роль, так как наиболее ценным считается создание общих теорий, моделей и алгоритмов, применимых к психике в целом, независимо от контекста, — то есть моделей, обладающих крайне широкими предсказательными возможностями; поэтому исследования, результаты, которых можно применить только к какой-то определённой ограниченной ситуации, обладают нисходящей ценностью. Операциональная валидность — частный случай внешней валидности, степень соответствия методики и плана эксперимента проверяемой гипотезе. Операциональная валидность определяет степень соответствия используемой экспериментальной методики (экспериментальных утверждений) теоретическим положениям, которые положены в основу организации и проведения данного эксперимента. Главные причины нарушения операционной валидности: несоответствие экспериментальной процедуры теме исследования (агрессивность – агрессия, тревога – тревожность и т.п.); условия проведения исследования (где и когда). Частью операциональной валидности можно считать конструктную валидность. Конструктная валидность — частный случай операциональной валидности, степень адекватности метода интерпретации экспериментальных данных теории, которая определяется правильностью употребления терминов той или иной теории. Конструктная валидность имеет отношение к попыткам обозначения любых аспектов эксперимента. Опасности нарушения конструктной валидности заключаются в неправильном обозначении причины и эффекта с помощью абстрактных терминов, терминов, взятых из обыденного языка или формальной теории.
-
Понятие “идеальный эксперимент” ввел в употребление Д. Кэмпбелл. Идеальный эксперимент предполагает изменение экспериментатором только независимой переменной, зависимая переменная контролируется. Другие условия эксперимента остаются неизменными. Идеальный эксперимент предполагает эквивалентность испытуемых, неизменность их характеристик во времени, отсутствие самого физического времени (как это ни парадоксально звучит), возможность проводить эксперимент бесконечно. Следствием этого является проведение всех экспериментальных воздействий одновременно.
Идеальный эксперимент противостоит реальному, в котором изменяются не только интересующие исследователя переменные, но и ряд других условий. Соответствие идеального эксперимента реальному выражается в такой его характеристике, как внутренняя валидьость (validitу) – достоверность результатов, которую обеспечивает реальный эксперимент по сравнению с идеальным. Внутренняя валидность характеризует меру влияния на изменение зависимой переменной тех условий (независимой переменной), которые варьирует экспериментатор (рис. 4.4).
Рис. 4.4
Чем больше влияют на изменение зависимой переменной неконтролируемые исследователем условия, тем ниже внутренняя валидность эксперимента. Следовательно, больше вероятность того, что факты, обнаруженные в эксперименте, являются артефактами.
Планирование эксперимента необходимо для выявления влияния независимой переменной на зависимую за счет контроля других переменных. Переменные, являющиеся источником артефактов, либо устраняются, либо их влияние усредняется (за счет смешения и погашения изменчивости условий эксперимента). Высокая внутренняя валидность – главный признак хорошего эксперимента (близко к “безупречному эксперименту”).
Не все переменные, влияющие на результат исследования, можно учесть или исключить (элиминировать). Те из них, которые нарушают внутреннюю валидность, называют “побочными”. К числу побочных, полностью не устранимых переменных относят влияние фактора времени, фактор задачи, фактор индивидуального различия.
Рассмотрим более подробно центральное понятие “валидность”. Обратимся к системе отношений “эксперимент–теория–реальность”. На основе теории выдвигается гипотеза, которая в конечном счете и проверяется в эксперименте. Методики и план эксперимента должны соответствовать проверяемой гипотезе – степень этого соответствия и характеризует операциональную валидность. Например, в эксперименте по научению резкий звук зуммера используется как эквивалент “наказания” за ошибку, поэтому возникает сомнение в правильности такой интерпретации. В самом эксперименте мы должны максимально учесть, устранить и т. д. влияние побочных переменных на зависимую переменную. Внутренняя валидность характеризует меру влияния независимой переменной на зависимую по отношению к другим факторам. Иными словами, внутренняя валидность тем выше, чем больше вероятность того, что экспериментальный эффект (изменение зависимой переменной) вызван изменением независимой переменной.
Эксперимент должен воспроизводить внешнюю реальность. Эксперимент, который полностью воспроизводит внешнюю реальность, называется экспериментом полного соответствия. Разумеется, в реальности полное соответствие недостижимо. Мера соответствия экспериментальной процедуры реальности характеризует внешнюю валидность эксперимента.
Дополнительные переменные, которые требуют учета в эксперименте, влияют на внешнюю валидность. Если от внутренней валидности зависит достоверность экспериментальных результатов, то от внешней – переносимость результатов из лабораторных условий на реальные процессы и обобщение их на другие сферы реальности.
Наконец, связь теории и реальности отражается в адекватности теории реальности и прогностичности ее предсказаний. Кэмпбелл ввел еще одно важное понятие, характеризующее валидность эксперимента, а именно – конструктивную валидность. Конструктная валидность выражает адекватность метода интерпретации экспериментальных данных теории, т. е. в структуру следует ввести четвертую составляющую – интерпретацию: теория–эксперимент–интерпретация–реальность.
Конструктная валидность, по мнению Кэмпбелла, характеризует правильность обозначения (интерпретации) причины и экспериментального эффекта с помощью абстрактных терминов из обыденного языка или формальной теории.
Таким образом, внутренняя валидность определяется достоверностью интерпретации экспериментального эффекта как связи изучаемой причины и следствия (отношение эксперимент–интерпретация), а конструктная валидность – правильностью употребления терминов той или иной теории при интерпретации данных эксперимента.
Кэмпбелл отмечает, что установление внутренней валидности требует отбраковывания альтернативных объяснений связи между зависимой и независимой переменными. Установление конструктивной валидности требует отказа от альтернативных интерпретаций соотношения причины и следствия с понятиями, взятыми из той или иной теории. С точки зрения Кэмпбелла, хороший эксперимент должен:
1) выявлять временную последовательность предполагаемых причины и следствия;
2) показывать, что вероятные причины и эффект взаимосвязаны (ковариантны);
3) исключать влияние побочных переменных, которым можно было бы объяснить экспериментальный эффект; 4) исключать альтернативные гипотезы о теоретических конструктах, объясняющих эту связь.
Для уяснения отношений между основными характеристиками экспериментального исследования полезно запомнить следующую схему: (см. рис. 4.5).
Рис. 4.5
Внутренняя валидность является непременным условием любого эксперимента. Кэмпбелл выделил восемь основных факторов, нарушающих внутреннюю валидность эксперимента. Перечислим их. Первую группу можно назвать факторами выборки:
1. Селекция – неэквивалентность групп по составу, которая вызывает систематическую ошибку в результатах.
2. Статистическая регрессия – частный случай ошибки селекции, когда группы отбирались на основе “крайних” показателей (иначе – корреляция из-за неоднородности группы).
3. Экспериментальный отсев – неравномерное выбывание испытуемых из сравниваемых групп, приводящее к неэквивалентности групп по составу.
4. Естественное развитие – изменение испытуемых, являющееся следствием течения времени, без связи с конкретными событиями: изменение состояния (голод, усталость, болезнь и др.), свойств индивида (возрастные перемены, накопление опыта и др.).
Вторая группа – побочные переменные, влияние которых приводит к следующим эффектам:
1. Эффект “истории”– конкретные события, происходящие в период между начальным и итоговым тестированием помимо экспериментального воздействия.
2. Эффект тестирования – влияние предварительного тестирования на результат итогового.
3. Инструментальная погрешность – определяется надежностью метода фиксации поведения испытуемого, т. е. надежностью теста; именно надежность влияет на валидность, по утверждению Кэмпбелла, а не наоборот.
4. Взаимодействие факторов: отбора; естественного развития; истории (разные истории экспериментальных групп) и др.
Позже Кэмпбелл описал еще ряд источников нарушения внутренней валидности. Наиболее существенные относятся к экспериментальной процедуре, а именно: компенсаторное сопоставление эффектов различных воздействий, имитация воздействия, когда его на самом деле не происходит и др.
-
Планирование экспериментов Планирование эксперимента — один из важнейших этапов организации психологического исследования, на котором исследователь пытается сконструировать наиболее оптимальную для воплощения на практике модель (то есть план) эксперимента. Грамотно составленная схема исследования, план, позволяет добиться оптимальных значений валидности, надёжности и точности в исследовании, предусмотреть нюансы, за которыми сложно уследить при бытовом «спонтанном экспериментировании». Зачастую, чтобы скорректировать план, экспериментаторы проводят так называемое пилотажное, или пробное, исследование, которое можно рассматривать как «черновик» будущего научного эксперимента. Экспериментальный план создаётся для того, чтобы ответить на основные вопросы о: • количестве независимых переменных, которые используются в эксперименте (одна или несколько?); • количестве уровней независимой переменной (изменяется ли независимая переменная или остаётся постоянной?); • методах контроля дополнительных, или возмущающих, переменных (какие необходимо и целесообразно применить?): o метод прямого контроля (прямое исключение известной дополнительной переменной), o метод выравнивания (учитывать известную дополнительную переменную при невозможности её исключения), o метод рандомизации (случайный отбор групп в случае неизвестности дополнительной переменной). Одним из самых важных вопросов, на которые должен ответить экспериментальный план, — определить, в какой последовательности должно происходить изменение рассматриваемых стимулов (независимых переменных), воздействующих на зависимую переменную. Последовательность предъявления стимулов — очень важный вопрос, напрямую касающийся соблюдения валидности исследования: к примеру, если постоянно предъявлять человеку один и тот же стимул, он может стать менее восприимчив к нему. Виды планов: 1. Простые (однофакторные) планы – предусматривают изучение влияния на зависимую переменную только одной независимой переменной. Преимущество таких планов состоит в их эффективности при установлении влияния независимой переменной, а также в лёгкости анализа и интерпретации результатов. Недостаток заключается в невозможности сделать вывод о функциональной зависимости между независимой и зависимой переменными. - Опыты с воспроизводимыми условиями. В сравнении с опытами с привлечением двух независимых групп такие планы требуют меньшего количества участников. План не подразумевает наличия разных групп (например, экспериментальной и контрольной). Цель таких опытов — установить воздействие одного фактора на одну переменную. - Опыты с привлечением двух независимых групп (экспериментальной и контрольной) – опыты, в которых экспериментальному воздействию подвергается лишь экспериментальная группа, в то время как контрольная группа продолжает делать то, что она обычно делает. Цель — проверка действия одной независимой переменной. 2. Комплексные планы составляются для экспериментов, в которых изучается либо воздействие нескольких независимых переменных (факторные планы), либо последовательное воздействие различных градаций одной независимой переменной (многоуровневые планы). - Планы для многоуровневых экспериментов. Если в экспериментах используется одна независимая переменная, ситуация, когда изучаются только два её значения, считается скорее исключением, чем правилом. В большинстве однофакторных исследований используется три или более значений независимой переменной, — такие планы часто называют однофакторными многоуровневыми. Такие планы могут использоваться как для исследования нелинейных эффектов (то есть случаев, когда независимая переменная принимает более двух значений), так и для проверки альтернативных гипотез. Преимущество — в возможности определить вид функциональной зависимости между независимой и зависимой переменными. Недостаток заключается в больших временных затратах, а также в необходимости привлечь больше участников. - Факторные планы подразумевают использование более чем одной независимой переменной. Таких переменных, или факторов, может быть сколько угодно, но обычно ограничиваются использованием двух, трёх, реже — четырёх. Факторные планы описываются с помощью системы нумерации, показывающей количество независимых переменных и количество значений (уровней), принимаемых каждой переменной. Например, факторный план 2х3 имеет две независимые переменные (факторы), первая из которых принимает два значения («2»), а вторая — три значения («3»). 3. Квазиэкспериментальные планы — планы для экспериментов, в которых вследствие неполного контроля за переменными нельзя сделать выводы о существовании причинно-следственной связи. Эти планы часто применяются в прикладной психологии. - Планы ex post facto. - исследования, в которых сбор и анализ данных производится после того, как событие уже свершилось, многие относят их к квазиэкспериментальным. Суть исследования в том, что экспериментатор сам не воздействует на испытуемых: в качестве воздействия выступает некоторое реальное событие из их жизни. При планировании исследования имитируется схема строгого эксперимента с уравниванием или рандомизацией групп и тестированием после воздействия. - Планы экспериментов с малым N также называют «планами с одним субъектом», так как индивидуально рассматривается поведение каждого испытуемого. Одной из главных причин использования экспериментов с малым N считается невозможность в некоторых случаях применить результаты, полученные из обобщений на больших группах людей, ни к одному из участников индивидуально (что, таким образом, приводит к нарушению индивидуальной валидности). Интроспективные исследования Эббингауза можно отнести к экспериментам с малым N (только исследуемым им субъектом был он сам). План с одним субъектом должен учитывать как минимум три условия: 1. Необходимо точно определить целевое поведение в терминах событий, которые легко зафиксировать. 2. Необходимо установить базовый уровень реакции. 3. Необходимо произвести воздействие на испытуемого и зафиксировать его поведение. 4. Планы корреляционных исследований — исследование, проводимое для подтверждения или опровержения гипотезы о статистической связи (корреляции) между несколькими (двумя или более) переменными. От квазиэкспериментального отличается тем, что в нём отсутствует управляемое воздействие на объект исследования. В корреляционном исследовании учёный выдвигает гипотезу о наличии статистической связи между несколькими психическими свойствами индивида или между определёнными внешними уровнями и психическими состояниями. Испытуемые должны быть в эквивалентных неизменных условиях. Виды корреляционных исследований: • Сравнение двух групп • Одномерное исследование • Корреляционное исследование попарно эквивалентных групп • Многомерное корреляционное исследование • Структурное корреляционное исследование • Лонгитюдное корреляционное исследование* Планирование включает в себя два этапа. 1. Содержательное планирование эксперимента: - Определение ряда теоретических и экспериментальных положений, образующих теоретическую основу исследования. - Формулировка теоретических и экспериментальных гипотез исследования. - Выбор необходимого метода эксперимента. - Решение вопроса выборки испытуемых: 1- Определение состава выборки. 2- Определение объёма выборки. 3- Определение способа формирования выборки. 2. Формальное планирование эксперимента: - Достижение возможности сравнения результатов. - Достижение возможности обсуждения полученных данных. - Обеспечение экономичного проведения исследования. Главной целью формального планирования считается исключение максимально возможного числа причин искажения результатов.
-
В учебниках можно встретить разные критерии классификаций экспериментальных планов. Важен общий контекст представления методов психологического исследования: рассматривается только экспериментальный метод или и другие подходы к сбору эмпирических данных, сравнивается ли проведение экспериментов в специально созданных и «полевых» условиях, учитываются ли при представлении экспериментальных схем возможные схемы обработки данных и т.д.
При обсуждении типов экспериментов были представлены содержательные критерии, позволяющие оценить разнообразие экспериментальных процедур при проверке психологических гипотез. На основе оценивания соответствия НП, ЗП и ДП моделируемым реальным условиям или теоретическим конструктам выделялись следующие типы экспериментов: естественные, искусственные и лабораторные. Остановимся на трех других критериях, позволяющих структурировать сведения из области формального планирования экспериментов.
Первый из них – это критерий строгого, или истинного, эксперимента, по отношению к которому можно выделить так называемые доэкспериментальные, экспериментальные иквазиэкспериментальные планы. Дж. Кэмпбелл связывает выделение истинных экспериментальных исследований с возможностью рандомизации, т.е. случайного распределения разных уровней ЯЯ по экспериментальным и контрольным условиям, а также с допущением об эквивалентности состава групп испытуемых. Рандомизацией называется такжестратегия случайного отбора испытуемых в группы из популяции. Случайным (рандомизированным) может быть также подбор испытуемых в группы, когда потенциальные участники эксперимента уже выбраны и требуется только распределить их в экспериментальную и контрольную группы. Случайная стратегия может быть направлена также на отбор групп испытуемых (например, учебных). Строгим критерием является именно случайный отбор испытуемых из популяции, решающий одновременно проблему репрезентативности выборки испытуемых и обеспечения эквивалентных по своему составу групп.
Сравнение групп, являющихся эквивалентными по всем факторам, кроме экспериментального воздействия, позволяет рассматривать сдвиг в значениях ЗП при сравнении экспериментального и контрольного условий именно в связи с воздействием этого фактора. Достижение желаемой эквивалентности означает здесь контроль источников угроз внутренней валидности со стороны факторов межиндивидуальных различий.
Второй критерий – это число осуществляемых экспериментальных воздействий. В соответствии с ним принято различать планы с одной независимой переменной и так называемые факторные планы (с двумя и более НП). Сколько бы факторов ни изменялось в моделируемой экспериментальной ситуации, каждый из них должен быть оценен с точки зрения шкалы, в которой представлены изменения переменной. Напомним, что это могут быть шкалы наименований, порядка, интервалов или отношений.