Реферат: Валидность психологического эксперимента
В целом о валидности эксперимента говорят, подразумевая все формы экспериментального контроля, направленного на обеспечение всех видов валидности. Результаты валидного эксперимента могут служить основанием достоверного вывода, если в целом реализована логически обоснованная система умозаключений, включающая взаимопереходы между разными уровнями гипотез, проверяемых в эксперименте. Если проконтролированы все возможные или наиболее явные угрозы внутренней и внешней валидности, хорошо решены проблемы операционализации переменных и проблемы соответствия, то такой эксперимент оценивается как валидный, или «правильный». Из правильно построенного эксперимента можно сделать достоверные – валидные, или «правильные», выводы, подразумевая отсутствие в них ошибок обобщения или ошибок умозаключений, но в выводах можно ошибиться.
Ошибки выводов, или недостоверные выводы, возможны в результате как неверных обобщений, так и проведения невалидных экспериментов. При понимании экспериментирования как чувственно-предметной деятельности ученого не следует, таким образом, ограничиваться описанием и оценкой того, как операционализируются переменные или как осуществляется их регистрация. Формулирование системы гипотез, оценка валидности эксперимента и реализация выводов входят как нормативы, или нормативные регуляторы, этой деятельности.
Выбор конкретной формы эксперимента связан с разработкой того или иного экспериментального плана (как схемы сбора данных при разных условиях НП) и с другими типами контроля (выбор типа эксперимента, осуществление «первичного» контроля, «дополнительного варьирования» переменных, введение расширенной переменной и т.д.). Решение проблем планирования означает при этом «прописывание» эксперимента в системе классификаций типов экспериментов и видов экспериментальных схем. Это в свою очередь позволяет обозначить возможности и ограничения последующих выводов.
Именно предположения о возможностях последующих обобщений направляют исследователя при решении вопросов содержательного и формального планирования экспериментов. Тем самым проблема выводов и обобщений оказывается разведенной по двум достаточно отстоящим друг от друга этапам – мысленного планирования экспериментальных схем и процедур и обоснования выводов на основании результатов уже проведенного исследования. В реальных экспериментальных исследованиях этому соответствует двухэтапность обобщений: как исходных предположений о виде зависимости между НП и ЗП и как завершающих выводов о возможности обобщений как переноса установленной зависимости за пределы экспериментальной ситуации (обобщения на теоретическую модель, на другие ситуации, виды деятельности, испытуемых и т.д.).
2 Компоненты содержательного и формального планирования
2.1 Подходы к определению термина «планирование эксперимента» . Выбор из возможных экспериментальных планов
Можно выделить следующие традиции в понимании того, что следует считать планированием психологического эксперимента.
1. Выбор схемы, или плана, получения данных для проверки каузальной гипотезы. Такому представлению о планировании, когда исследователь выбирает ту или иную из набора имеющихся схем, сравнивая их возможности с точки зрения решения проблем приближения эксперимента к безупречному, следует Р. Готтсданкер.
2. Определение типа переменных с точки зрения заданных гипотетических конструктов и решения вопросов об операционализации переменных, а исходя из этого – выбор методических средств, отражающих взаимосвязь аспектов содержательного и формального планирования.
3. Планирование с целью последующего использования статистических решений об экспериментальном факте, а значит, указание того минимального эффекта (в различиях ЗП), который будет принят в качестве критериального для принятия решения об экспериментальном факте.
Р. Готтсданкер предлагает анализировать возможные экспериментальные схемы по следующим основным признакам:
-вид схем: предлагаются ли сравниваемые условия НП одному и тому же испытуемому или разным группам людей. В первом случае говорят об интраиндивидуальных схемах, а во втором – о межгрупповых. В качестве промежуточных схем выделяют кросс-индивидуальные, в которых предполагается предъявление всех условий НП каждому испытуемому, но их последовательности варьируют применительно к выделенным подгруппам;
-тип эксперимента: достигается ли условие выделения единичной НП, что характерно для лабораторных экспериментов, или НП представляется в комплексе других условий, в разной степени претендующих на выполнение условия соответствия экспериментальной модели той внешней реальности, на которую будет осуществлено обобщение;
-формы контроля угроз валидности: контролируются ли все те возможные источники возникновения угроз внутренней валидности со стороны побочных переменных (ПП), которые могут обеспечивать систематические, несистематические, сопутствующие смешения (НП с ПП) или ненадежность данных;
-число управляемых факторов: является ли экспериментальная схема факторной или схемой с одной управляемой НП; предполагается ли при этом количественное измерение основных результатов действия переменных (и их взаимодействий при факторных схемах);
-степень согласия с критериями мысленных эталонов эксперимента: достигается ли наилучшая репрезентативность реально проводимого эксперимента по сравнению с мысленными образцами, следование которым обеспечивало бы построение безупречного эксперимента.
Представление об эксперименте как гипотетико-дедуктивном методе при этом опускается, а оценка психологических гипотез рассматривается в одном основном аспекте – контроля угроз внутренней и внешней валидности. Основное внимание уделяется обоснованию преимуществ использованной стратегии подбора испытуемых в группы, их отбора из популяции, если речь идет о межгрупповых схемах, или распределения экспериментальных условий в общей их последовательности (при контроле факторов задач, времени, несистематической изменчивости), если речь идет об интраиндивидуальных схемах.
По-разному для этих схем решаются проблемы планирования для достижения приемлемой надежности данных. Оценка надежности зависит от контроля несистематической изменчивости, вариабельности использованных переменных и выбранного числа опытов для разных экспериментальных условий. С точки зрения контроля факторов ненадежности данных обсуждаются и возможности проводить усреднение показателей ЗП по разным условиям или для разных групп испытуемых и т.д. За выбранным числом проб, приходящихся на одно и то же условие НП, стоит принятый критерий количественной оценки необходимой величины экспериментального эффекта, без достижения которого экспериментальная гипотеза считается не выдержавшей опытную проверку и должна быть отвергнута.
По существу, элементы содержательного планирования присутствуют во всех проводимых экспериментах. Выбор схемы – это завершающий этап планирования. Формальное планирование начинается с этапа выбора между интраиндивидуальными и межгрупповыми способами сравнения ЗП. Учет дополнительных переменных или обсуждение общности экспериментальной выявленной тенденции для других испытуемых – это продолжение решения вопросов содержательного планирования, поскольку они прямо связаны с контролем уровня обобщений устанавливаемой зависимости.
Так, в примере с демонстрацией случайной стратегии образования экспериментальной последовательности условий НП – эксперимента на выявление предпочтений сортов томатного сока, представляемого также как пример эксперимента, дублирующего реальный мир, учитывается связь между обобщением как прогнозом для отдельного конкретного человека и необходимостью использовать интраиндивидуальные схемы. То, что эксперимент проводится в практических целях и то, каким образом в нем решены проблемы соответствия, определяет и обобщения (как рекомендации далее покупать сок определенного сорта). Чаще экспериментальная модель не так прямо определяет возможности обобщений.
Экскурс 2
В примере Р. Готтсданкера для демонстрации трудности выделения Психологической переменной (исследование «по трудовой этике») имеется в виду проверка гипотезы, относимой к среднегрупповой тенденции.
Авторы исследования Сингх и Кэри создали экспериментальную модель ситуации, в которой вознаграждение могло быть получено после приложения определенных усилий и без каких-либо усилий. Девочек-индианок предварительно обучали тому, как можно получить шарик: в одном случае для этого нужно было 10 раз нажать на специальный рычаг, а во втором – просто ждать у другого конца стола и через 15 с шарик выкатывался сам. Дети могли потом взять шарики себе или поменять их на любую понравившуюся им игрушку в лаборатории. В основной части опытов ребенку предлагалось самому выбирать, каким образом он будет получать шарик. Всего нужно было получить 5 наград – «заслуженных» или нет.
Среднегрупповая тенденция выразилась в том, что 60% испытуемых предпочли реализовывать усилия для получения вознаграждения, хотя знали, что оно будет и при бездействии. Предпочтение действия бездействию характеризовало только часть группы. Объяснение этого факта строилось как апелляция к этике в рамках протестантской морали: дети могли считать, что нехорошо получать вознаграждение без труда. Контроль этой переменной был осуществлен как выбор из популяции не белых детей.
Чтобы учесть отнесенность выявленной зависимости к конкретным популяциям, была использована вторая – дополнительная – переменная, по которой сравнивали по две этнически разные группы мальчиков и девочек (контрольными служили группы белых детей). Варьирование групп позволяло проконтролировать вклад культурного фона: конкурирующей гипотезой о причинах предпочтения действия бездействию могла выступать гипотеза о роли протестантской морали у белых детей, в соответствии с нормами которой получение награды предполагает работу, т.е. реализацию усилий для вознаграждения. Тот факт, что дети, имевшие предположительно разные культурные нормы представлений об этике получения вознаграждения, проявили примерно равные частотные предпочтения действия бездействию, позволило авторам обобщить гипотезу как верную для разных групп.
Приведенный пример демонстрирует довольно ограниченное понимание тех процессов, которые имели место в данной экспериментальной модели. Почему действие предпочитается бездействию? Нужно ли было вообще использовать ситуацию награды, чтобы показать это предпочтение? С какими базисными процессами все-таки связывать объяснение указанного предпочтения?
В европейский период работы школы К. Левина в ней было проведено исследование, знание которого, возможно, помогло бы авторам приведенного исследования определиться в более широком поле конкурирующих объяснений, чем только объяснение переменными культурного фона. Речь идет о работе А. Карстен, продемонстрировавшей феномен психического пресыщения. Было показано, что испытуемые склонны варьировать способ выполнения задания, чтобы только не оставаться в ситуации выполнения монотонной деятельности. Объяснительными конструктами выступили термины квазипотребности и психологического поля, реализующие принципы левиновской концепции. Возможно, в эксперименте Сингх и Кэри идет речь о других базисных процессах, но возможно о схожих. В любом случае в их объяснениях очевидна недостаточная охваченность имеющихся в литературе представлений о регуляции такого рода предпочтений в способах реализации действий, которые связаны с активностью испытуемого: в выходе за рамки требований ситуации, в переформулировании этих требований при построении образа задачи и т.д.
Таким образом, и валидный эксперимент может давать довольно слабые эмпирические доводы, если планирование совершалось в основном как формальное.
2.2Содержательное планирование и выбор типа эксперимента
Содержательное планирование, как указывалось, включает этапы формулирования экспериментальных гипотез и обоснования их интерпретационных компонентов, связанных с введением гипотетических конструктов.
Для проведения эксперимента как в лабораторных условиях, так и в «полевых» на этапе содержательного планирования обосновываются также его конструктная валидность, связанная с контролем путей конкретизации теоретических понятий в гипотетические конструкты, и приемлемость именно экспериментального (а не «пассивно наблюдающего») подхода к организации сбора данных для проверки психологической гипотезы. К содержательному планированию можно отнести и обсуждение используемого методического арсенала фиксации переменных, т.е. решение проблем операционализации переменных, и утверждение постулируемых или неявно присутствующих в формулировке экспериментальной гипотезы предположений о сути психологической причинности или виде психологических законов.
Рассмотрение соотношения в ожидаемых эмпирических данных закономерного и случайного – также проблема содержательного планирования, которая, однако, не всегда в достаточной степени обсуждается (или эксплицируется) исследователем. Данные, полученные для отдельного испытуемого или отдельной выборки испытуемых, могут рассматриваться как случайные в том смысле, что при большом числе испытуемых (или нескольких выборках) они окажутся нехарактерными для основного массива результатов. При использовании понятия распределения выборочных значений ЗП, включающего переход к статистическим решениям о его виде, отдельные данные являются уже составной частью ряда значений измеренной переменной. При этом случайность означает лишь вариабельность самой переменной, а не степень отличия индивидуального случая от характерных, т.е. наиболее часто встречающихся, показателей.