「統計的に有意でない」は「存在しない」を示すものではない(2019.3.22作成)

7
asadori_Qly @AsadoriQ

Scientists rise up against statistical significance nature.com/articles/d4158…

2019-03-22 21:00:07
リンク www.nature.com Scientists rise up against statistical significance Valentin Amrhein, Sander Greenland, Blake McShane and more than 800 signatories call for an end to hyped claims and the dismissal of possibly crucial effects. 21
asadori_Qly @AsadoriQ

しかしこれらの手前で統計的に見るというのがそもそもどのような認識の枠組みを前提としているのかをとりわけ統計を道具として使う場合にはきちんと考える必要がある。

2019-03-22 21:06:38
asadori_Qly @AsadoriQ

最初のNature記事冒頭。"When was the last time you heard a seminar speaker claim there was ‘no difference’ between two groups because the difference was ‘statistically non-significant’?"

2019-03-22 21:09:29
asadori_Qly @AsadoriQ

被曝影響について中川恵一氏をはじめ複数の人が「統計的に有意ではない」を「存在しない」にすり替えたのはまさにこれ。

2019-03-22 21:11:31
asadori_Qly @AsadoriQ

ただし被曝影響については100mSv以下でも統計的有意性を示す研究は特に近年、複数あるの。なので中川恵一氏がしたような主張は二重に不適切である。

2019-03-22 21:12:11
asadori_Qly @AsadoriQ

Neyman-PeasonからふたたびFisherへ? (中川恵一氏の発言に関する問題とは別)

2019-03-22 21:21:18
asadori_Qly @AsadoriQ

"Last, and most important of all, be humble: ..." 謙虚であれというのはもっと手前の段階から重要になる。そもそも量的研究だからといって、検定(や推定)を行うことは必然でも当然でもないし、することに意味がないことも論理的にできないこともある。

2019-03-22 21:30:05
asadori_Qly @AsadoriQ

喩えて言うと武甲山と北海道駒ケ岳の高さを(これまで正確に計測されていなかったから)計測しましたという報告に「有意性を検定せよ」といった査読コメントが返ってくることがある。まあDLを使ってないからダメみたいのと一緒でそうなると統計は考えないための道具のようになる。

2019-03-22 21:40:19

Yuri Hiranuma @YuriHiranuma

Rethinking P-Values: Is "Statistical Significance" Useless? | Psychology Today Canada psychologytoday.com/ca/blog/the-at…

2019-03-24 04:02:27
Yuri Hiranuma @YuriHiranuma

“Based on our review of the articles in this special issue and the broader literature, we conclude that it is time to stop using the term ‘statistically significant’ entirely. No p-value can reveal the plausibility, presence, truth, or importance of an association or effect.

2019-03-24 04:36:09
Yuri Hiranuma @YuriHiranuma

Therefore, a label of statistical significance does not mean or imply that an association or effect is highly probable, real, true, or important. Nor does a label of statistical non-significance lead to the association or effect being improbable, absent, false, or unimportant.”

2019-03-24 04:36:09
Yuri Hiranuma @YuriHiranuma

The American Statistician Vol.73, 2019 tandfonline.com/toc/utas20/73/… Statistical Inference in the 21st Century: A World Beyond p < 0.05

2019-03-24 04:36:09
日付切取線 @krtr_date

✄------------ 5/31(金) -----------✄

2019-05-31 00:00:00
内田 @uchida_kawasaki

統計的有意性を巡る重要な論争 | Nature ダイジェスト | Nature Research natureasia.com/ja-jp/ndigest/…

2019-05-31 18:26:37
内田 @uchida_kawasaki

抜粋引用>2019年3月20日にアメリカ統計学会からオンライン出版された(R. L. Wasserstein et al. Am. Stat. doi.org/10.1080/000313… )。そのうちの1編の論文には「この(統計的有意性という)ツールが暴君と化した」という嘆きの言葉が記されている。

2019-05-31 18:29:59
日付切取線 @krtr_date

✄------------ 6/20(木) -----------✄

2019-06-20 00:00:01
Yuri Hiranuma @YuriHiranuma

「統計的に有意」誤解の温床で有害 ネイチャー論文波紋:朝日新聞デジタル asahi.com/articles/ASM6K… ”統計的に有意かどうかはもともと、ある結果が偶然かどうかを判断する指標に過ぎないのに、それが独り歩きして判断を誤る原因になっているからだ。”

2019-06-20 11:17:28

関連まとめ・論文・記事

内田 @uchida_kawasaki

2015.10.6 T&F社のBASP誌がP値の使用禁止を発表 | エディテージ・インサイト editage.jp/insights/a-tay…

2019-03-22 22:57:02
内田 @uchida_kawasaki

Psychology journal bans P values : Nature News & Comment nature.com/news/psycholog… Test for reliability of results ‘too easy to pass’, say editors.

2019-03-22 22:56:04
内田 @uchida_kawasaki

Scientific method: Statistical errors : Nature News & Comment nature.com/news/scientifi… P values, the 'gold standard' of statistical validity, are not as reliable as many scientists assume.

2019-03-22 22:54:54