Статистическая значимость

Статистическая значимость обычно объявляется, когда p-значение меньше заранее выбранного уровня альфа или доверительный интервал исключает значение отсутствия эффекта.

Не равно важности

При большой выборке крошечный и практически неважный эффект может стать статистически значимым. При малой выборке важный эффект может не достичь порога из-за неточности.

Не доказывает причинность

Значимость относится к случайной вариации в рамках модели. Она не исключает смещение отбора, ошибки измерения, смешивающие факторы, множественные сравнения и выборочную публикацию.