「実験結果の再現可能性」特集号読書会
PPS読書会始まりました~。ハッシュタグは #pps7_6 です。タグ有り発言は会場でも疑似リアルタイムにスクリーンに投射しております。
2013-02-23 10:52:20Folk Psychologyと追試の容易さの問題は後で出そうと思っていたのに、序盤から出してしまったよ。 #PPS7_6
2013-02-23 10:52:40たしかに知覚心理学で被験者3だったりすることへの疑問は特集号の中でほとんど触れられていないなぁ。外から見ているとあれってビックリするのだが、中の人たちはどう思っているのかな。#pps7_6
2013-02-23 10:58:22#pps7_6 RT: @drkgoto: @kosukesa 特殊な患者さんを使ったケース・スタディ同様、知覚系はN=1でも再現性を確認しつつ、実験を進められると思うんです。でも動物のメタ認知研究は危ない。個体差で片付けていい問題だとは思えない研究も多いです。
2013-02-23 12:45:34そう思います。Nの少なさはいかんともしがたい。#pps7_6 RT: @kosukesa: 大型類人猿とかゾウとかの実験ってサンプル数も追試可能性もアレとかそういううわ何をするやめくぁws
2013-02-23 12:48:25#pps7_6 RT: @kosukesa: 自分で追試しようとしてできるだけの資源があるかどうかは、その研究の信頼性の判断に影響するだろうか。
2013-02-23 12:47:26ではどうすればいいか、が僕にはわからんです QT @ichipoohmt: そう思います。Nの少なさはいかんともしがたい。#pps7_6 RT: @kosukesa: 大型類人猿とかゾウとかの実験ってサンプル数も追試可能性もアレとかそういううわ何をするやめくぁws
2013-02-23 13:09:17俺がやってる範囲だと3は厳しい QT @drkgoto: それは難しいでしょうね。実験系に馴染みがないと、データの再現性は掴みかねると思うので。最近ずっとN=3で出すという信念を持ち査読を突破していますが、サンプル数に関して、査読者の意見がよく2つに割れます。
2013-02-23 13:10:18A failure to confirm a result based on a serious direct replication attempt is interesting gossip... おっしゃる通りw #pps7_6
2013-02-23 11:08:51元来は(概念的な)追試から始まった研究がその部分を含まず公刊されていることは多いのでは。特に元の研究グループと別のグループがやってる場合は。#pps7_6
2013-02-23 11:21:33“@gsd9720: Pashler Harris(2012) False Positiveをα=.05に留めるのは難しい。そこで追試が重要だけど、概念的と直接的で公表の方が違い問題あり 特に追試成功については前者が有利に働く 長期的には科学の自浄作用は怪しい” #pps7_6
2013-02-23 11:24:09