このラノ2013ランキングの問題点とモニター票についての個人的考察

17
jellies @highjellies

【このラノ2013ランキングの問題点 1/9】「このライトノベルがすごい! 2013」のランキングが、どう見てもおかしい。調べてみたところ[協力者]のポイントが不当に減らされていることが原因だとわかった。この問題について簡単にまとめておく。

2012-11-19 21:54:44
jellies @highjellies

【2/9】[HP]一色だった2011以前のランキングも、[協力者]大勝利の2012ランキングも、賛否両論とはいえランキング自体におかしな点は(ほぼ)なかった。しかし2013は「集計方法の説明と実際にやってることが全然違う」。これは流石にいただけない。

2012-11-19 22:04:36
jellies @highjellies

【3/9】[協力者]に注目した2012ランキングのグラフがhttp://t.co/XQWypREG全ポイントの約60%を[協力者]が入れたポイントが占めている。一方で2013はhttp://t.co/5mCDIuoc[協力者]は全体の約42%。なぜこんなにも減ったのか?

2012-11-19 22:13:49
リンク ow.ly Ow.ly - image uploaded by @highjellies View and share this image from @highjellies and hosted by Ow.ly
リンク ow.ly Ow.ly - image uploaded by @highjellies View and share this image from @highjellies and hosted by Ow.ly
jellies @highjellies

【4/9】このラノ2013のランキング集計方法の説明(P.37)にはこうある。1位2位3位4位5位に選んだ作品に、[協力者]はそれぞれ10点9点8点7点6点を、[HP][モニター]は5点4点3点2点1点を加算。そしてこの3グループの投票者数を"一定値の母数"に揃える。

2012-11-19 22:25:46
jellies @highjellies

【5/9】結論から言うと、この"一定値の母数"が大ウソ。P.51のポイント内訳から逆算すると、[HP]は1363人→100人分へと換算され、[モニター]は103人→103人分へと増減なし、そして[協力者]は50人→54.348人分へと換算されていることがわかる。

2012-11-19 22:34:12
jellies @highjellies

【6/9】[モニター]が100人分でなく103人分なのは些細な問題にしても(2012もこうだった)、[協力者]のポイントが不当に減らされているのはとうてい看過できない。本来100人分に換算するべきところが、わずか54.348人分。たったの約半分だ。

2012-11-19 22:43:43
jellies @highjellies

【7/9】いちおう言っておくと、今はこの集計方法自体の良し悪しは問題にしていない。問題視しているのは、ここまで2012と集計方法を変えておきながらその旨をまったく明記しない「言ってることとやってることがぜんぜん違う」状況である。

2012-11-19 22:50:55
jellies @highjellies

【8/9】そもそも、「54.348人分」という、整数ですらない中途半端な値はどこから出てきたのか? その明確な根拠を挙げてもらえない限りは、このラノスタッフが[協力者]のポイントを恣意的に操作したと思われても仕方ないのではないだろうか。

2012-11-19 22:59:30
jellies @highjellies

【9/9】この「54.348人分」に、なんとか納得のいく自然な説明をつけようと試みましたが、いまだに思いつきません。もし見当がついた人がいたら教えてくださると嬉しいです。

2012-11-19 23:08:57
jellies @highjellies

【10/9】なお、もしも集計が"一定値の母数"に正しく揃えられていたとすると、ランキングTop10はこうなる。1位SAO、2位六花、3位禁書、4位東雲侑子、5位サクラダ、6位アルデラ、7位はまち、8位俺妹、9位バカテス、10位ノーゲーム。

2012-11-19 23:10:24
jellies @highjellies

去年@mizunotoriさんが「出てきた結果に合わせて、その都度、集計方法を変えたり、レギュレーションに調整を加えたりするのは泥縄なので、もっと根本的に変えたほうがいいんじゃないの、と思う派。」と言っていたけど、まさにそれが悪い形で現実になった、ように見える。

2012-11-19 23:13:10
jellies @highjellies

[協力者]だけのランキングを見たい、という需要がありそうなのでTop60を協力者ポイント順に並べたものを作ってみた。ついでに分かる範囲で、各作品に何人の[協力者]が投票したかのデータもつけた。 http://t.co/Z44GHExp

2012-11-19 23:15:44
リンク t.co Ow.ly - kyou_rank.txt uploaded by @highjellies Download and share kyou_rank.txt uploaded by @highjellies and hosted by Ow.ly
在賀くるみ @kurumi_alca

@highjellies 1人あたり15点のHP・モニター層と、40点の協力者層で、協力者の影響力が2.66…倍だということ(去年のjelliesさんのツイートの要約)から54.348%補正をかけたらどうなるか計算したら1.45倍という数字は出ましたが、あまり関係ないですかね。

2012-11-19 23:25:57
在賀くるみ @kurumi_alca

1.45倍に特に意味があるわけではないし、その数字はだからなんだという感じである。

2012-11-19 23:33:04
在賀くるみ @kurumi_alca

そういえば去年ブログで「このラノ作品ランキングの協力者ポイントを半分にしたら」なんて記事を書いたけれど、今回の比重はまさにそんな具合の結果になったわけだから、結果だけ見る分には割とすっきりする。 http://t.co/NsFUyGk8...

2012-11-19 23:44:02
jellies @highjellies

【このラノ2013[モニター]についての個人的考察 1/14】さっきのは公開されているデータをもとに誰でも言えるようなことを言ったにすぎないので、ここからは根拠の薄い想像も交えて自分の意見を述べることにする。具体的には、なにかとやり玉にあげられやすい[モニター]について。

2012-11-19 23:18:00
jellies @highjellies

【2/14】このラノに[モニター]は必要か不要か? と訊かれれば私は「不要派」。単純にモニターをなくせばいいかどうかはさておき、[HP]や[協力者]と比べて、[モニター]をランキングに入れる必然性が薄い。

2012-11-19 23:27:16
jellies @highjellies

【3/14】定量的な根拠は、ポイントの相関。上位60作品のデータ(P.51)のポイントの内訳はhttp://t.co/vuxxKlpwぱっと見でも分かるように、[HP]と[モニター]の投票傾向は非常に似通っている。

2012-11-19 23:38:40
リンク ow.ly Ow.ly - image uploaded by @highjellies View and share this image from @highjellies and hosted by Ow.ly
jellies @highjellies

【4/14】散布図にしてみると、[HP]と[協力者]はhttp://t.co/9lTzqBuN[HP]と[モニター]はhttp://t.co/rWKrPQg5[協力者]と[モニター]はhttp://t.co/vzrYEYLc

2012-11-19 23:44:04
リンク ow.ly Ow.ly - image uploaded by @highjellies View and share this image from @highjellies and hosted by Ow.ly
リンク ow.ly Ow.ly - image uploaded by @highjellies View and share this image from @highjellies and hosted by Ow.ly
1 ・・ 5 次へ