正確な意味
新薬の効果を検定するなら帰無仮説は「効果がない」です。p＝0.03なら「本当に効果がないとき、この程度の差が偶然出る確率は3%」という意味です。事前に決めた有意水準（通常0.05）を下回れば帰無仮説を棄却し「統計的に有意」と言います。0.05はフィッシャーが便宜上示した慣例にすぎません。
よくある誤解
p値は帰無仮説が正しい確率ではなく、効果の大きさも示しません。サンプルが非常に大きければ些細な差も有意になり、何度も分析して有意なものだけ報告するpハッキングは再現性の危機を招きました。2016年、アメリカ統計学会はp値だけで結論を出さないよう声明を出しました。事前確率はベイズの定理、有意な相関が因果とは限らない点は相関関係と因果関係をご覧ください。
よくある質問
- p＝0.06なら効果なし？
- いいえ。基準に少し届かないだけで、効果量や信頼区間も確認しましょう。
- pが小さいほど効果が大きい？
- いいえ。サンプルサイズにも大きく左右されます。
出典確認日：2026-10-26
参考文献
- Wasserstein, R. L., & Lazar, N. A. (2016). The ASA statement on p-values: Context, process, and purpose. The American Statistician, 70(2), 129–133.
- Fisher, R. A. (1925). Statistical Methods for Research Workers. Oliver & Boyd.
- Ioannidis, J. P. A. (2005). Why most published research findings are false. PLoS Medicine, 2(8), e124.