Интерпретация результатов исследования, требования к интерпретации и представлению результатов исследования.
Результаты исследования, их интерпретация и обобщение
Данные исследования обработаны и представлены в той или иной форме. Применение статистических критериев уже позволило сделать вывод о принятии или отвержении статистической гипотезы H1 или Н0.
Предположим, что статистическая гипотеза о различии результатов экспериментальной и контрольной групп принята. Какие выводы мы можем сделать после обработки экспериментальных результатов? Итог любого исследования — преобразование «сырых» данных в решение об обнаружении явления (различий в поведении двух и более групп), о статистической связи или причинной зависимости. Подтверждение или опровержение статистической гипотезы о значимости обнаруженных сходств — различий, связей и должно быть интерпретировано как подтверждение (неопровержение) или опровержение экспериментальной гипотезы. Как правило, исследователь пытается подтвердить гипотезы о различиях поведения контрольной и экспериментальной групп. Нуль-гипотеза — гипотеза о тождестве групп.
При статистическом выводе возможны различные варианты решений. Исследователь может принять или отвергнуть статистическую нуль-гипотезу, но она может быть объективно («на самом деле») верной или ложной. Соответственно возможны четыре исхода:
1) принятие верной нуль-гипотезы;
2) отвержение ложной нуль-гипотезы;
3) принятие ложной нуль-гипотезы;
4) отвержение верной нуль-гипотезы.
Два варианта решения правильны, два — ошибочны. Ошибочные варианты называются ошибками 1-го и 2-го рода.
Ошибку 1-го рода исследователь совершает, если отвергает истинную нуль-гипотезу. Ошибка 2-го рода состоит в принятии ложной нуль-гипотезы (и отвержении верной исследовательской гипотезы о различиях) (см. табл. 7.1).
Таблица 7.1
Решение | Гипотеза | |
Нуль-гипотеза верна | Исследовательская гипотеза верна | |
Отвержение нуль-гипотезы | Ошибка 1-го рода | Верное решение |
Принятие нуль-гипотезы | Верное решение | Ошибка 2-го рода |
Чем больше число испытуемых и опытов, чем выше статистическая достоверность вывода (принятый уровень значимости), тем меньше вероятность совершения ошибок 1-го рода.
Например, если при а = 0,1 слабые различия между средними, определенные с помощью t-критерия, могут быть значимыми, то при а = 0,05 и а = 0,001 значимых различий мы можем не получить.Ошибка 1-го рода особо значима в уточняющем (конфирматорном) эксперименте, а также в тех случаях, когда принятие неверной гипотезы о различиях имеет практическую значимость. Допустим, принятие ложной гипотезы об интеллектуальных различиях представителей разных социальных страт или этнических групп имеет чрезвычайно значимые социально-политические следствия.
Ошибки 2-го рода — отвержение верной исследовательской гипотезы и принятие нуль-гипотезы — особенно существенна при проведении пробного (эксплораторного) эксперимента. Отклонение исследовательской гипотезы на начальной стадии может надолго закрыть дорогу исследователям в данной предметной области. Поэтому уровень статистической достоверности при проведении эксплораторного эксперимента на малых выборках стремятся понизить, т.е. выбирают а = 0,1 или а = 0,05. Исследователю, разумеется, приятнее получить подтверждение своим собственным мыслям, поэтому субъективная значимость ошибок 2-го рода значительно ниже, чем субъективная значимость ошибок 1-го рода.
Но для науки как сферы человеческой деятельности важнее получить максимально достоверное знание, а не «засорять» научные журналы невалидными и ненадежными результатами. Поэтому стратегия исследований в любой области психологической науки такова: переход от эксплораторного (поискового) эксперимента к кон-фирматорному (уточняющему), от низких уровней достоверности — к высоким, от исследований на малых выборках — к исследованиям на больших.
В конкретных же исследованиях значимость ошибок 1-го и 2-го рода может сильно зависеть от целей, которые преследуются в эксперименте, от предмета изучения и характера решаемой исследовательской задачи и т.д. В обыденной и профессиональной жизни мы часто сталкиваемся с такими ситуациями, когда надо оценить сравнительную значимость ошибок 1-го и 2-го рода.
Например, судья или присяжные, определяя виновность или невиновность подсудимого, должны для себя решить, что более значимо: признать невиновного виновным или виновного невиновным. Установка на «гуманность» диктует правило: пусть будут оправданы десять преступников, чем пострадает один невиновный. «Репрессивная» установка предполагает другое правило: пусть пострадают десять невиновных, лишь бы один виновный не ушел от наказания.Принятие или отвержение статистической гипотезы не является единственным условием принятия или не принятия экспериментальной гипотезы. Если статистическая гипотеза отвергнута, то исследователь может это реализовать по-разному. Он может завершить эксперимент и предпринять попытку выдвижения новых гипотез. Экспериментатор может провести новое исследование на расширенной выборке с использованием модифицированного экспериментального плана и т.д. «Отрицательный» результат, как говорят опытные экспериментаторы, тоже результат.
С позиций критического рационализма «отрицательные» выводы, отвергающие экспериментальную гипотезу, — это главный результат любого эксперимента, так как сам эксперимент есть способ выбраковки нежизнеспособных гипотез. Отклонение экспериментальной гипотезы отнюдь не означает, что теорию, следствием которой она являлась, следует сразу отбросить. Возможно, неверно сформулирована теоретическая гипотеза: в прямой вывод из теории может вкрасться ошибка. Не исключено, что теоретическая гипотеза верна, но ее экспериментальная версия некорректно сформулирована. При этом зачастую даже подтверждение экспериментальной гипотезы не свидетельствует о подтверждении теории. Допустим, исходя из концепции фасилитации, предполагается, что эмоциональная поддержка действий испытуемого будет приводить к более успешному решению задач. Но вместо превентивной эмоциональной поддержки любых проявлений интеллектуальной активности мы в эксперименте поощряли испытуемого за хорошую работу по окончании решения задания. Разумеется, эффект будет обнаружен, но никакого отношения к исходной теоретической гипотезе он не имеет.
Рассмотрение различных частных случаев подтверждения или неподтверждения конкретных экспериментальных гипотез — дело увлекательное и вполне доступное любому студенту, который усвоил азы психологического экспериментирования. Предположим, что экспериментальная гипотеза подтверждена или, следуя строгой логике К. Поппера, не опровергнута. Требуется решить проблему обобщения результатов эксперимента: на какие группы испытуемых могут быть распространены выводы, в каких внешних условиях будут воспроизводиться результаты, не будет ли влиять на результаты исследования смена экспериментатора?
В отличие от классического естествознания, экспериментальный результат в психологии должен быть инвариантен (неизменен) по отношению не только ко всем объектам данного типа, к пространственно-временным (и некоторым другим) условиям проведения эксперимента, но и к особенностям взаимодействия экспериментатора и испытуемого, а также к содержанию деятельности испытуемого.