P値について

P値は「本当は薬効が同じであったとすれば、第一種の過誤がおこる率」という条件付確率である。



P値の解釈については諸説あります。
なんでもかんでも『p<0.05だったら有意差あるからいいんだ』みたいな考え方が多いようですが・・・



「大きいことはいいことだ」　大規模臨床試験にお墨付

大規模臨床試験で得られたP値は、小さい試験で得られたP値と比べて、治療効果に差があることを示すより強い証拠となる。

Peto R, Pike MC, Armitage P et al.
Design and analysis of randomized clinical trials requiring prolonged observation of each patient; introduction and design.
Br J Cancer. 34:585-612,1976.



「大きいことは効果ないということだ」　大規模試験の証拠能力は弱い

P=0.05という値は、少数例から得たのであれば強い証拠となるが、多数例から得たものであれば、その証拠は常に極めて弱く、極端な場合は差が無いという証拠になる。

Freeman PR
The role of P-value in analyzing trial results.
Stat Med 12: 1443-1452,1993.



「P値で表現する時代は終わった」　効果の大きさで表すべき


効く　vs　効かない　という仮説検定ではなく、「どれくらい効果があるのか」を表すべきであり、効果の大きさとその信頼区間を表すべきである。

Gardner MJ, Altman DG Confidence intervals rather than P values; estimation rather than hypothesis testing.BMJ 292: 746-750,1986.
Simon R
Confidence intervals for reporting results of clinical trials.
Ann Intern Med 105:429-435, 1986.

Evans SJ, Mills P, Dawson J
The end of P values?Br Heart J 60:177-180,1988


「損をする確率がP値と一致する」　新しい解釈


よいはずの治療でかえって損をする確率そのものがPである。
"the right thing is done for the wrong reason"

Anscombe FJ
The summarizing of clinical experiments by significance levels.
Stat Med 9:703-708, 1990.