「センター国語は得点分布が綺麗だった→平均点が低いのは受験者の学力不足」!?

まとめました
9
yvt @YVT

とりまお互いに確率学的に独立した得点分布を持つ問題が多いと合計点の分布は滑らかになるよね。 つまり ・様々な面を満遍なく評価できる問題 ・運ゲー 以上のいずれかに当てはまる場合に得点分布はあんなふうに綺麗になる

2014-01-25 23:08:46
yvt @YVT

このどちら側なのかを区別するには他の試験での得点との相関を調べる必要があるので、センターの分布のみでは判断できません

2014-01-25 23:10:38
LNSEAB @lnseab

@PG_nonen いや、出題者が想定した受験者のレベルと実際の受験者のレベルはおそらく一致したぐらいまでは言っていいような

2014-01-25 23:11:11
イカ娘 @came_tongue_000

あー、ちなみに、平均点で「上下」論じて、学力が高いとか低いってのは統計学的にはあんま意味の無い議論でゲソ。「差がある」かどうか、ってのは検定にかけなきゃ分からんでゲソし、そもそも母集団が違うんで意味を成さないんじゃなイカ。

2014-01-25 23:14:59
イカ娘 @came_tongue_000

前、全国学力テストで「都道府県毎に平均点出して順序付けして」とか話がニュースで流れてきた時大笑いしてたんでゲソが(笑)、基本的に「平均点で順序付け」とかバカバカしいでゲソよ(笑)。

2014-01-25 23:16:15
EOF @eofor0

正規分布を知らないから適切な質問として根拠を聞いたわけでそこに自信の有無は関係なく、なぜ根拠の無い自信を見出したのかが不可解なので下手したらその受験生よりも酷いのでは

2014-01-25 23:20:22
イカ娘 @came_tongue_000

うん、@lnseab氏が言ってる事がそのまま「質の高さ」(件の人がそれ意図してるかどうかはさておき)を表してると思うでゲソね。出題者側が単に「受験生の平均的な学力」を読みきっていた、って以上の意味は無いと思うでゲソ。

2014-01-25 23:21:10
EOF @eofor0

「この分布は間違っている、または綺麗でないことが確実だ」とその受験生が思っている。と思わない限り生まれない言葉な気がする

2014-01-25 23:21:52
イカ娘 @came_tongue_000

実は偏差値に対する疑いの一つに、「正規分布になる」って仮定が間違ってるんじゃなイカ、って話があって、と言うのも、教科に対して得手不得手が学生にはあって、結局統計取ると二峰性の分布に良くなる、って例があるわけなんでゲソよ。

2014-01-25 23:23:07
イカ娘 @came_tongue_000

つまり、事実上「得意な奴等の平均」と「不得手なヤツの平均」ってのが両方出てきちまうわけでゲソね。

2014-01-25 23:23:46
イカ娘 @came_tongue_000

それで言うと、 @lnseab 氏が指摘してるように「全く出題者が平均レベルを上手い具合想定してた」って意味では、「質の高い問題」ではあるわけでゲソ。やっぱこれも「出題者に対する」評価になるでゲソね。

2014-01-25 23:24:41
yvt @YVT

件のアレだけど(少なくとも自分的には)普通に考えて平均点の変動は学力の変動に対しては相対的尺度にすらならないよね……

2014-01-25 23:25:05