Психологическая энциклопедия

Ограничение исследования

Условия и недостатки, из-за которых выводы исследования применимы не ко всем людям и ситуациям. Честные авторы описывают их явно.

Ограничение исследования — сведения о том, где результатам стоит доверять осторожно. У любой работы есть пределы: определённая выборка, метод измерения, период, культурная среда. Раздел «Ограничения» в научных публикациях — не признак слабости, а признак добросовестности.

Типичные ограничения

Малая выборка: результаты менее устойчивы. Специфичная группа: студенты университета, участники онлайн-опроса, пациенты одной клиники. Самоотчёты: люди могут неточно вспоминать и приукрашивать. Краткий срок: неизвестно, сохранится ли эффект. Отсутствие контроля: нельзя исключить другие причины. Культурные различия: результаты могут не переноситься.

Чем отличается «значимый» результат от «важного»

Статистическая значимость говорит лишь о том, что результат маловероятно объясняется случаем. Размер эффекта показывает, насколько велико различие. Большое исследование может выявить крошечный эффект, который в жизни не заметен. Маленькое — пропустить реальный. Читайте и p-значение, и величину эффекта, и доверительный интервал.

Обобщение

Результат, полученный на взрослых, не обязательно верен для детей. Эффект при лёгкой тревоге не обязательно сохраняется при тяжёлой. Исследования западных обществ не гарантируют результата в других странах. Хорошие авторы не распространяют выводы дальше, чем позволяют данные.

Как оценивать самому

Найдите ответы: кто участвовал и как отбирался? Что сравнивалось? Как измеряли? Сколько людей выбыло? Что авторы признают ограничением? Кто финансировал? Нет ли конфликта интересов? Хотя бы эти вопросы защищают от наивного восприятия.

Ограничения популярных пересказов

СМИ и социальные сети упрощают результаты: «учёные доказали». Ограничения исчезают. Если можно, найдите первоисточник и прочитайте аннотацию и раздел обсуждения.

Что делать с ограничениями

Не отвергать исследование, а учитывать: результат ориентир, а не закон. Искать другие исследования и обзоры. Для личных решений советоваться со специалистами, знакомыми с литературой.

Пример

Исследование показало, что дыхательная практика улучшила настроение у студентов, выполнявших её две недели. Это не гарантирует эффекта при длительной депрессии у пожилых людей.

Связанные понятия

Словарь →