Артефакты в эксперименте и источники их возникновения
Артефакт (лат. arte factum — сделанный искусственно) — результат исследования, являющийся следствием изменения зависимой переменной под влиянием побочных переменных. Артефакт есть следствие ошибок или недостаточного контроля условий проведения исследования.
Одно и то же явление может быть артефактом в рамках одной экспериментальной схемы и фактом в рамках другой, поэтому явления, не объясняемые принятой теорией, часто трактуются как артефакты.Главный источник артефактов, нарушающий внешнюю валидность процедуры, — взаимодействие тестирования с экспериментальным воздействием. Например, тестирование уровня знаний по определенному предмету перед проведением эксперимента по заучиванию материала может привести к актуализации исходных знаний и к общему повышению продуктивности запоминания. Достигается это за счет актуализации мнемонических способностей и создания установки на запоминание.
Если рандомизация проведена качественно, то этот план является наилучшим, позволяет контролировать большинство источников артефактов; кроме того, для него применимы различные варианты дисперсионного анализа.
Исследователь осознает те источники артефактов — внешние переменные, которые он не может контролировать. Для частичной компенсации и контроля эффектов, возникающих при нарушении планов «истинных экспериментов», исследователи используют искусственные схемы, которые и называются квазиэкспериментальными планами.
Можно перечислить и другие источники артефактов — внешние переменные, которые не контролируются этим планом.
. Главными источниками артефактов являются различия в составе групп. В первую очередь на результаты эксперимента может повлиять «эффект смешения», т. е. взаимодействия состава группы с факторами тестирования, фоновых событий, естественного развития и др. Например, если для участия в эксперименте отобраны параллельные классы А и В, то в В могут оказаться дети с меньшим IQ, чем в А, поэтому различия в результатах (увеличение запаса слов от первого тестирования ко второму) могут быть обусловлены большей обучаемостью первой группы по сравнению со второй.
Чем больше сходство экспериментальной и контрольной групп, тем более валидны результаты, получаемые с помощью этого плана.Перечислим основные артефакты, которые возникают в ходе применения корреляционного плана:
1. Эффект последовательности — предшествующее выполнение одного теста может повлиять на результат выполнения другого (симметричный или асимметричный перенос).
2. Эффект научения — при выполнении серии различных тестовых испытаний у участника эксперимента может повышаться компетентность в тестировании.
3. Эффекты фоновых воздействий и «естественного» развития приводят к неконтролируемой динамике состояния испытуемого в ходе исследования.
4. Взаимодействие процедуры тестирования и состава группы проявляется при исследовании неоднородной группы: интроверты хуже сдают экзамены, чем экстраверты, «тревожные» хуже справляются со скоростными тестами интеллекта. Для контроля эффектов последовательности и переноса следует пользоваться тем же приемом, что и при планировании экспериментов, а именно — контрбалансировкой. Только вместо воздействий меняется порядок проведения тестов.
Само участие в эксперименте порождает у испытуемых ряд поведенческих проявлений, которые являются причинами артефактов. Среди наиболее известных — «эффект плацебо», «эффект Хотторна», «эффект аудитории».
Схема эксперимента, если рассматривать его как деятельность экспериментатора, соответствует модели необихевиоризма: стимул — промежуточные переменные — реакция. Экспериментатор дает испытуемому задания, испытуемый (промежуточная переменная) их выполняет. Если исследователь заинтересован в подтверждении (или опровержении) своей гипотезы, то он может неосознанно вносить искажения в ход эксперимента и интерпретацию данных, добиваясь, чтобы испытуемый «работал под гипотезу», создавая привилегированные условия лишь для экспериментальной группы. Такие действия экспериментатора — источник артефактов. Американский психолог Р. Розенталь назвал это явление «эффектом Пигмалиона» в честь персонажа греческого мифа. (Скульптор Пигмалион изваял статую прекрасной девушки Галатеи.
Она была так хороша, что Пигмалион влюбился в Галатею и стал умолять богов оживить статую. Боги отозвались на его просьбы, и девушка ожила.)Исследователь, заинтересованный в подтверждении теории, действует непроизвольно так, чтобы она была подтверждена. Можно контролировать данный эффект. Для этого следует привлекать к проведению исследования экспериментаторов-ассистентов, не знающих его целей и гипотез. Полноценный контроль — перепроверка результатов другими исследователями, критически относящимися к гипотезе автора эксперимента. Однако и в этом случае мы не гарантированы от артефактов — контролеры такие же грешные люди, как и автор эксперимента.
На испытуемого одновременно воздействует и стимул, и фоновые условия, что порождает типичные для психологии проблемы контролируемости экспериментальных переменных и экологической валидности исследования (иными словами, проблема переноса данных лабораторного исследования в естественную среду). Если фон воздействует на психику больше, чем стимул, то в результате исследования получается не факт, а артефакт.
Задача исследователя состоит в том, чтобы выяснить, какая из составляющих послужила причиной наблюдаемого поведения.
Отсюда все источники артефактов для проведения психологического эксперимента можно условно разделить на два вида (есть еще третий источник — несовершенный инструмент, но его мы рассмотрим позже): внутренние состояния испытуемого и состояния среды. Д. Кэмпбелл (1980) выделяет и фоновые артефакты: фоновые эффекты, инструментальную погрешность, реакцию испытуемого на эксперимент и т.д.
Если фиксация и анализ поведения являются прерогативой каузального подхода, то исследование продуктов деятельности есть прерогатива подхода телеологического. Действительно, используя телеологический подход в психологическом исследовании в качестве конечной точки процесса, берем результат активности человека — испытуемого, а затем пытаемся интерпретировать результат с точки зрения тех внутренних психических причин (намерений, планов, мотивов, целей, способностей испытуемого), которые потенциально могут влиять на поведение и, следовательно, на особенности результата.
В этом случае, помимо недоучета внутренних иррелевантных задач, есть опасность «просмотреть» испытуемого. То есть всегда есть неучитываемые экспериментатором изменения в среде, которые произвел испытуемый. Кроме того, есть изменения в среде, которые не осознает и сам испытуемый, но которые также являются следствием его активности (табл.1.4).
Таблица 1.4
Испытуемый | Экспериментатор | |
Осознание | Нет осознания | |
Осознание | основной продукт | побочный продукт |
Нет осознания | побочный продукт | побочный продукт |
Очевидно, что даже в случае сотрудничества испытуемого и экспериментатора теоретически возможно появление неосознанных результатов деятельности испытуемого. То же относится к деятельности исследователя по контролю за экспериментальными переменными.
Таким образом, источником артефактов в психологическом эксперименте могут быть как среда, так и испытуемый (и экспериментатор как фоновая часть среды).
Кроме того, источником артефактов может быть и неадекватность используемой психологической теории экспериментальной процедуре: исследователь может просмотреть, не учесть психические переменные, влияющие на поведение системы (человека).
Ряд побочных эффектов психолог может не заметить (просмотреть факты) из-за неполного учета изменений в среде, которые произвел испытуемый.
Кроме того, следует учитывать эффект «естественного» развития, о котором говорилось выше: за продукт деятельности испытуемого можно принять «естественные» изменения среды. Особенно важно обращать на это внимание при проведении социально-психологических исследований, где среда изменчива.