「道徳偏差値」の問題点について【基礎心理学くん】

話題になっていた「道徳偏差値」の分析方法に関して,少し疑問があったので,連続ツイートしてみました。
59
きそしんくん@9年目突入! @kisopsy_kun

さっき書くのをやめた連続ツイートだけど,やっぱりこのデータ分析にはいろいろ問題があるので,一応触れておきます。→部科学省が都道府県別「道徳偏差値」を発表!これだけ偏差値に差があったら話合わないわけだわ!!! | netgeek netgeek.biz/archives/26607

2014-12-28 23:25:34
きそしんくん@9年目突入! @kisopsy_kun

まず,この記事の内容を簡単に説明するね。元の記事(tmaita77.blogspot.jp/2014/12/blog-p… …)は,「徳」をあえて数値化して,都道府県別に「道徳偏差値」を求めてやろう,という大変興味深い試みをしているよ。

2014-12-28 23:26:01
きそしんくん@9年目突入! @kisopsy_kun

どうやって道徳偏差値を求めたのか?それは,文科省がWeb上で公開している「平成26年度 全国学力・学習状況調査 報告書・調査結果資料」のデータから,道徳に関係する質問項目の結果を抜き出して,比較する,というもの。データ→nier.go.jp/14chousakekkah…

2014-12-28 23:26:28
きそしんくん@9年目突入! @kisopsy_kun

具体的には,筆者さんは次の五つの質問項目に注目しているよ。 ①学校のきまりを守っているか ②友達との約束を守っているか ③人の気持ちが分かる人間になりたいか ④いじめは,どんな理由があってもいけないことだと思うか ⑤人の役に立つ人間になりたいか

2014-12-28 23:27:12
きそしんくん@9年目突入! @kisopsy_kun

それぞれの質問項目は,「1. 当てはまる」「2. どちらかといえば当てはまる」「3. どちらかといえば当てはまらない」「4. 当てはまらない」の四段階で,全国の小学生に評定されたよ。

2014-12-28 23:28:13
きそしんくん@9年目突入! @kisopsy_kun

この記事の筆者さんは,「1. 当てはまる」に答えた人の割合を元に,地域ごとの「道徳偏差値」を算出して,秋田・山梨・宮崎は道徳偏差値が高く,神奈川や大阪のような大都市は道徳偏差値が低い,と結論づけているけど,これには「ちょっと待った」と言わざるをえない。

2014-12-28 23:31:33
榎本 澄雄 (えのもと すみを) @Sumiwo_Enomoto

@kisopsy_kun 「管理者」の都合で「こころ」を数値化するのは けっこうアブナイことだと思いませんか⁈ ただのアンケートとは使われ方が違う訳だから…。 こういう文科省の取り組みには反対します。 私には全く理解ができません。

2014-12-28 23:39:03
きそしんくん@9年目突入! @kisopsy_kun

@Sumiwo_Enomoto この分析結果自体は文科省が出したものではないのです。あくまでもデータが文科省のものであるというだけで,道徳偏差値を算出するための調査でもないことにはご注意を。ただ,この分析の仕方も結構怪しいので,ちょっと疑問を投げかけてみようと思います。

2014-12-28 23:47:43
マニア提督_ねこじゃらし🐾💕 @PIEZO233L

@kisopsy_kun 偏差値だけ見ると評価はできるけど物事の背景に何がいて 歪み要素が何かがわからなくなってしまうかもしれな 計算式はデータにルートとタウ入れるからね

2014-12-28 23:49:56
きそしんくん@9年目突入! @kisopsy_kun

@JRAY5AR そうなんですよね,偏差値だけでは判断できないことというのはとても多いです。それについても今から説明していきますね。

2014-12-28 23:58:17
きそしんくん@9年目突入! @kisopsy_kun

まず,偏差値って何か,というところなんだけど,平たく言えば,「一人ひとりの得点を,全体の平均が50,標準偏差(得点のばらつき具合)が10になるように調整したもの」で,「 (一人ひとりの得点 - 平均点)÷ 標準偏差 × 10 + 50」で計算できる。次に具体例を書くね。

2014-12-28 23:42:01
きそしんくん@9年目突入! @kisopsy_kun

架空の全国統一模試があるとする。百点満点の英語の試験が行われて,平均点は40点だった。一人ひとりの得点を見ると,だいたい七割ぐらいの人は40±20点,つまり20点~60点の間に収まっていた。このとき平均点は40点で,準偏差(得点のばらつき具合)が20点だった,ということになる。

2014-12-28 23:42:39
きそしんくん@9年目突入! @kisopsy_kun

例えば,僕の妹がこのテストで70点を取ったとすると,偏差値はいくつ?さっきの計算式でいけば,(70 - 40) / 20 * 10 + 50 = 65で,つまり偏差値は65。これを高いとみるかどうかは人によりけりだと思うけど,多くの人にとって,決して悪くない数値に見えるよね。

2014-12-28 23:46:15
きそしんくん@9年目突入! @kisopsy_kun

じゃあ,次に,「学力がほとんど変わらない人たちから成る集団」が同じような試験を受けたとする。学力に差がなくても,その日のコンディションとか,勘違いとか,ケアレスミスとかを考慮すれば,得点にばらつきは生まれるよね。だから,全員が同じ得点になるということはなさそうだ。

2014-12-28 23:50:31
きそしんくん@9年目突入! @kisopsy_kun

平均点はさっきと同じ40点だったとする。でも,今回のテストでは,約7割の人が40±5すなわち35-45点の範囲に収まった。つまり,平均値は40点で,標準偏差は5点。この誤差の5点は,明らかにコンディションやらミスやらが原因で,学力の違いではなさそうだよね。

2014-12-28 23:52:31
きそしんくん@9年目突入! @kisopsy_kun

さて。この集団の中で,僕が48点を取ったとする。偏差値は,(48 - 40) / 5 * 10 + 50 = 66で,妹より高い!…けど,そもそも偏差値というものが,集団全体に対する位置を表すものであることに注意。こういうときは偏差値よりも,元の得点で比較すべきだよね。

2014-12-28 23:56:15
きそしんくん@9年目突入! @kisopsy_kun

さらにいえば,この「学力がほとんど変わらない人たちから成る集団」において,僕の得点は突出して高いと言えるのか?学力が変わらないと言いながらも,実は僕だけ学力が抜きんでていたのか?恐らく,そんなことはないだろうね。たぶん,たまたま運よくヤマカンで答えた問題が合ってたんだろう。

2014-12-28 23:57:35
きそしんくん@9年目突入! @kisopsy_kun

つまり,大事なことは二つ。一つ目は,「偏差値よりも元の得点のほうが役に立つ場合がある」こと,そして二つ目は,「集団内で実質的に差がないときでさえ,偏差値は差を誇張して表現してしまう場合がある」ということ。

2014-12-29 00:00:26
きそしんくん@9年目突入! @kisopsy_kun

さて,最初に紹介した記事のタイトルには「これだけ偏差値に差があったら話合わないわけだわ!!!」って書いてあったけど,今述べた理由から,「偏差値に差があった」としても,本質的に差があるとは限らないことはもう分かるよね。

2014-12-29 00:03:41
きそしんくん@9年目突入! @kisopsy_kun

このデータ分析では,さっきも述べたように,「1. 当てはまる」に答えた人の割合を使って偏差値を求めているけれど,これだと少し差が分かりにくいので,心理学でよく使われる方法を使って,次のように得点を計算し直すね。

2014-12-29 00:06:13
きそしんくん@9年目突入! @kisopsy_kun

「1. 当てはまる」「2. どちらかといえば当てはまる」「3. どちらかといえば当てはまらない」「4. 当てはまらない」の順番に,4点,3点,2点,1点,という粗点を割り振ることにする。つまり,得点が高いほど道徳的あるといえるような,1~4の範囲を取りうる変数として考える。

2014-12-29 00:07:39
きそしんくん@9年目突入! @kisopsy_kun

(本当は,このような尺度を間隔尺度とみなすことには問題があるかもしれないけれど,いろいろ端折ってしぶしぶ「慣例」に倣い,間隔尺度とみなせることにして,話を進めます。)

2014-12-29 00:09:20
きそしんくん@9年目突入! @kisopsy_kun

このように得点化すると,例えば同じ質問に対してAさんは1点,Bさんは3点,といった評価を与えたことにできる。ここから全員の得点の平均値を地域・項目ごとに求めて,それを基に道徳偏差値を計算し直してみたよ。

2014-12-29 00:11:52
きそしんくん@9年目突入! @kisopsy_kun

@zatutan Togetterでは一つのツイートに二つの画像は入れられないのかー>< 散布図はこちら。 pic.twitter.com/HaDSebsEd9

2014-12-29 01:19:44
拡大
きそしんくん@9年目突入! @kisopsy_kun

その結果がこちら。表の一番右の列は,元の記事に書かれている道徳偏差値を表しているよ。概ね同じような順位だね。そのことは右側の散布図を見ても,計算方法の違いは大した違いを生んではなさそう (r = .99)。 pic.twitter.com/68P43p9ePa

2014-12-29 00:19:36
拡大
拡大