#統計 帰無仮説と対立仮説の組が沢山あって、対立仮説の側が正しいものの割合はpだとします。 それらに有意水準5%検出力80%の仮説検定を適用したとします。 このときP値が5%未満になった場合に制限したとき、対立仮説の側が正しい確率はどの程度になるかは、pにも大きく依存します。

#統計 仮説検定による統計的に有意な結果が再現不可能になる確率は有意水準よりもずっと大きな値になりがちであることについては、例えば最新シマリス本の試し読み部分にも書いてあります。 非常に易しい話です(割合について習う小学校5年制レベル)。

#統計 医療関係者であれば、特異度(1-有意水準)や感度(検出力)だけでは実効的に偽陽性がどれだけの割合で発生するかは決まらず、有病率が非常に重要だと知っているはず。 仮説検定でも同じことになります。有意水準が5%であっても効かない薬が5%よりもずっと大きな割合で流通する危険性がある。続く