Тестирование теорий в исследованиях: методы и распространенные ошибки

Джастин Вонг

Руководитель отдела маркетинга и роста

Получила степень бакалавра в области глобального бизнеса и цифровых искусств, а также дополнительную специализацию в сфере предпринимательства

Проверка теории — это то, чем вы занимаетесь, когда теория появляется раньше данных. Вы берете общее утверждение, сформулированное кем-то другим, определяете, что оно означает для вашего конкретного случая, и выясняете, подтверждается ли это следствие. Это дедуктивная половина исследования, и именно в ней проходит большая часть работы аспирантов.

Отличие, делающее это понятие полезным, заключается в его противоположности. Создание теории начинается с наблюдений и приводит к созданию теории. Проверка теории начинается с теории и приводит к вердикту. То, чем именно вы занимаетесь, определяет дизайн вашего исследования, анализ и то, что считается хорошим результатом.

Что на самом деле означает проверка теории

В учебнике Бхаттачерджи по методам открытых социальных наук это различие сформулировано максимально четко: в индуктивном исследовании цель состоит в том, чтобы вывести теоретические концепции и закономерности из наблюдаемых данных, тогда как в дедуктивном исследовании цель заключается в том, чтобы проверить концепции и закономерности, известные из теории, с использованием новых эмпирических данных. Затем он называет их напрямую: индуктивное исследование — это исследование, создающее теорию, а дедуктивное исследование — это исследование, проверяющее теорию.

Обратите внимание, что это означает для вашего вклада. В работе по созданию теории сама теория является вашим результатом, и вас оценивают по тому, хороша ли она. В работе по проверке теории теория является вашими вводными данными, и вас оценивают по тому, была ли проверка объективной.

Создание теории и проверка теории: сравнение

Создание теории начинается с наблюдений и продвигается к общему утверждению. Оно носит индуктивный характер, теория является результатом, и этот подход применяется в обоснованной теории, поисковых кейс-стади и открытом кодировании. Он задает вопрос «что здесь происходит?» и оказывается успешным, когда формулируется концепция, которую ранее никто не называл.

Проверка теории начинается с существующей теории и продвигается к прогнозу. Она носит дедуктивный характер, теория является вводными данными, и этот подход применяется в экспериментах, опросах со сформулированными гипотезами и дедуктивном кодировании на основе предварительной структуры. Он отвечает на вопрос, подтверждается ли теория в данном случае, и оказывается успешным, даже если прогноз не оправдывается, поскольку несбывшийся прогноз информативен в отличие от неубедительного исследования.

Бхаттачерджи прямо подчеркивает, что здесь нет иерархии: создание теории и проверка теории одинаково важны для развития науки. Научные области развиваются, циклически переходя от одного к другому.

Что должна давать вам проверяемая теория

Не каждую теорию можно проверить в том виде, в каком она сформулирована, и обнаружить это на восьмом месяце работы — дорогое удовольствие. Должны присутствовать три составляющие.

Достаточно общее утверждение, чтобы иметь следствия. Если теория описывает только тот случай, на основе которого она возникла, то перенести в ваше исследование будет нечего.

Конструкты, которые можно операционализировать. Каждая концепция должна быть превращена во что-то измеримое, что означает точное определение того, как она будет измеряться, с помощью какого инструмента и как будет интерпретироваться результат. Теория, центральный конструкт которой никто не может измерить, практически непроверяема, даже если она логична в принципе.

Прогноз, который может оказаться ложным. Это то, что люди часто упускают. Если любой возможный результат согласуется с теорией, значит, вы не разработали проверку.

Как проходит проверка теории

Последовательность шагов коротка, и каждый шаг накладывает ограничения на следующий.

Возьмите теорию и сформулируйте ее одним предложением. Выведите прогноз в форме: если эта теория верна, то в этой популяции мы должны наблюдать следующее. Операционализируйте обе стороны, чтобы прогноз указывал на конкретное измеряемое значение, а не просто на направление. Зафиксируйте свои показатели до сбора данных, чтобы проверка была действительно объективной. Затем соберите данные, проанализируйте их и сообщите о результатах.

Последний шаг — это то, где проверка теории чаще всего идет не так, и эта ошибка носит логический характер. Подтверждение вашего прогноза не доказывает теорию, поскольку другие механизмы могли привести к тому же результату. Иной вывод является ошибкой подтверждения консеквента. С логической точки зрения неподтвержденный прогноз гораздо сильнее, именно поэтому отрицательные результаты заслуживают большего уважения, чем они обычно получают.

Существует одна честная сложность. Когда прогноз не оправдывается, вы также проверяете свои показатели, выборку и процедуру. Неудача говорит о том, что что-то в этом комплексе неверно, но это не обязательно сама теория. Открытое признание этого воспринимается как научная строгость, а не как уклонение от ответа.

Где проверка теории проявляется по дизайну исследования

Дизайн	Что проверяет	Типичный результат
Эксперимент	Производит ли манипуляция прогнозируемый эффект	Подтвержденная или неподтвержденная гипотеза
Опрос со сформулированными гипотезами	Сохраняются ли прогнозируемые взаимосвязи в популяции	Соответствие модели и знаки коэффициентов по сравнению с прогнозами
Подтверждающее кейс-стади	Объясняет ли теория случай, выбранный потому, что он должен быть сложным испытанием	Подтверждение, ограничение или граничное условие
Дедуктивное качественное кодирование	Отражает ли предварительная структура то, что описывают участники	Подтвержденные, опровергнутые, уточненные или расширенные конструкты
Репликация	Повторяется ли установленный результат в определенных условиях	Успешная или неудавшаяся репликация, обе подлежат публикации

Строка о качественных методах часто удивляет людей. Дедуктивный качественный анализ — это реальная традиция, описываемая Файфом и Госнер как сочетание дедуктивной и индуктивной работы для изучения подтверждающих, опровергающих, уточняющих и расширяющих доказательств исследуемой теории. Теория указывает вам, куда смотреть. Она не говорит вам, что именно вы обнаружили.

Тестируйте теорию, а не свою привязанность к ней

Признаком хорошей работы по проверке теории является то, что читатель может увидеть, как все могло сложиться иначе. Сформулируйте теорию, укажите, что свидетельствовало бы против нее, зафиксируйте это до начала исследования и сообщите о полученном результате, а не о том, который вы хотели получить.

Если вы все еще решаете, создает ли ваш проект теорию или проверяет ее, запишите прогноз в одно предложение и посмотрите, возможно ли это. Все последующие шаги, от методологического раздела до того, как вы работаете с источниками, на которых основываете теорию, вытекают из этого ответа.

Содержание