ニンジャスレイヤーと圧縮率による著者推定のなんか改善

NJRecalls @NJRecalls

…結構いい成績では？ pic.twitter.com/hRKE6DTIzB

拡大

拡大

拡大

NJRecalls @NJRecalls

以前こういうことをやっていたのを覚えている方もいらっしゃるだろう…これを昨日思い出して…： ニンジャスレイヤーと圧縮率による著者推定のなんか - Togetterまとめ - togetter.com/li/645615

NJRecalls @NJRecalls

以前のヤツには何点か問題がある。まず文字数の少なさだ。元の論文では30000字で行っているが、以前はセクション1でやってたりした。二つ目には正解がわからない。どちらがボンド、どちらがモーゼズの書いたエピソードだ？…この二つの問題を一挙に解決できるアイテムがあるのを思い出した。

NJRecalls @NJRecalls

それが「ニンジャスレイヤー キョート・ヘル・オン・アース 【下】 (キョート殺伐都市 # 8) 」（ amazon.co.jp/dp/4047301892 ）だよ！巻末に原作者からのコメントがあり、多分これがメインの著者と見ていい。幾つかは明言している。そして第二部は文字数も申し分ない

NJRecalls @NJRecalls

そこで原作者たちが「書いた」と表現している７つの第２部エピソードについて、他のエピソードと繋げた時の圧縮率向上を算出し、より向上する組み合わせに引力が働くようにして、ビジュアライズしたのがこれだ！ pic.twitter.com/4IVwSYCpqh

拡大

NJRecalls @NJRecalls

きちんと二つのクラスタに分かれるではないか…これもうちょっと早くにやればニンジャ学会誌に投稿できたな… twitter.com/NJRecalls/stat…

NJRecalls @NJRecalls

以前のやつ（ twitter.com/NJRecalls/stat… ）をちょっと増やして、ウォード法でクラスター分析した結果。やはり綺麗に二つに分かれる pic.twitter.com/jg9hHpZsva

拡大

NJRecalls @NJRecalls

第２部原作者コメントのある29エピソードのうちボンド、モーゼズ8エピソードずつのTwitter連載時テキストを元にクラスタリング。ちゃんと分かれる。ここに第３部エピソードを投げ込んで、どちらに行くか見てみようではないか pic.twitter.com/QmK2fQP5Pd

拡大

NJRecalls @NJRecalls

まあ実際には「ボンドチーム」「モーゼズチーム」な訳だけど…その次は翻訳チームのオリジナル小説を投げ込んでさ、どこに翻訳翻訳翻訳翻訳翻訳原作者翻訳翻訳翻訳翻訳翻訳翻訳翻訳

NJRecalls @NJRecalls

まずは「リボルバー・アンド・ヌンチャク」。図の301だ。…一応モーゼズ（担当翻訳チーム）クラスタに入っていることが分かる。では正解は？こうだ… twitter.com/njslyr/status/… pic.twitter.com/pFFOvhS1J2

ニンジャスレイヤー / Ninja Slayer @NJSLYR

◆10位◆リボルバー・アンド・ヌンチャク◆人生どん詰まりのニンジャハンターがたどる数奇な運命。モーゼズお得意の低予算映画アトモスフィアに溢れたハードボイルド短編だ。◆109839pt◆ www10.atwiki.jp/njslyr/pages/8… ◆

2014-03-04 15:18:32

拡大

NJRecalls @NJRecalls

「サツバツ・ナイト・バイ・ナイト」図の302は見つけづらいかもしれないが完全にモーゼズ（担当翻訳チーム）クラスタ。正解は？ twitter.com/njslyr/status/… pic.twitter.com/fFnF0y1GNv

ニンジャスレイヤー / Ninja Slayer @NJSLYR

◆M：このエピソードには何人も主役が存在する。その全てを語るのは難しい。一言で言おう。このエピソードにはニンジャの魅力が凝縮している。それは常識や重苦しい停滞感を破壊する爆発的パワだ！衝撃のクライマックスシーンを書き切った時、僕は思わず立ち上がって鏡の前でカラテし、飛び跳ねた！◆

2014-03-04 17:28:07

拡大

NJRecalls @NJRecalls

「モータードリヴン・ブルース」図の303。ボンド（担当翻訳チーム）と判定された。正解を見てみよう twitter.com/njslyr/status/… pic.twitter.com/1mkVnBIB5t

ニンジャスレイヤー / Ninja Slayer @NJSLYR

◆B:パワー溢れるテクノロジーの実現に人が全身全霊を込めて打ち込む姿は美しい。ゼンの境地が見えることすらある。だが、そのテクノロジーが何の為に生み出され、誰の血を流させるのか。熱狂の土台となっているのは何なのか。それを今再び見つめるべく、この話を書いた。◆

2014-03-04 15:53:28

拡大

NJRecalls @NJRecalls

つまり、読んで文体の特徴を見るとか…Twitterクライアント名を見るとか…でなくても、一定量のテキストを入れるとボンド（担当翻訳チーム）かモーゼズ（担当翻訳チーム）か判定できる機械的手段が出来たと言ってよいであろう…

NJRecalls @NJRecalls

ちなみに、元々の詳しい手法はこちらの論文にある。二つのテキストを連結して、単独の時より圧縮率がどれだけ良くなったか見る、という簡単な手法だ。 i-repository.net/contents/asia-…

NJRecalls @NJRecalls

そうだ！あともう一つやってみよう…「ノーホーマー・ノーサヴァイヴ」第３部エピソード投票でボンドの発案だと明かされた時は結構「ボンドかよ！？」的反応があった。…ボンドだ。間違いない twitter.com/njslyr/status/… pic.twitter.com/2ijVyqptgH

ニンジャスレイヤー / Ninja Slayer @NJSLYR

◆Ｍ：ボンドが「フジキドに野球でニンジャと戦わせる」と言い出した時は、彼の正気を疑った。だが彼は本気だったので、僕はサイバーパンク的考証を行った。自動化し暴走するシステム、人間疎外、ハイテックの罠、それを打破するカラテ…結果としてそこに現れたのは、ネオサイタマの縮図だったんだ。◆

2014-03-04 16:07:21

拡大

NJRecalls @NJRecalls

こないだのテキスト情報からのボンドorモーゼズ（担当チーム）推定に使用した方法についてまとめました： 推定圧縮プログラムによる著者推定技術のニンジャスレイヤーへの応用 slideshare.net/rnatori/ss-554… #njslyr7d

NJRecalls @NJRecalls

ニンジャ学会に出せればよかったんだけどね…こういう本来はもっとちゃんとやれる話を論文にするのは…こう…もっとガチな能力が必要になってしまうし、なかなか文章で説明するのも難しいのだ

NJRecalls @NJRecalls

ちなみにTogetterからのテキストダウンロード及びノンブルの除去を行うプログラムと、フォルダを指定すると中のtxtファイルを使ってすべての組み合わせでの圧縮率改善係数を算出してcsvに書き出すプログラムを作成してある

NJRecalls @NJRecalls

（これまでのあらすじ）圧縮プログラムによって、テキスト情報からモーゼズ担当チームの文章かボンド担当チームの文章かを判別することに成功した開発チーム。だが今後の展望は限りないのだった twitter.com/NJRecalls/stat…

NJRecalls @NJRecalls

そこで今回は、他の人物が書いたテキストと、両翻訳チームの訳したテキストを区別できるかみてみましょう。サンプルに選んだのはこちらから、３作者それぞれ２作品ずつ、いずれも５セクション以上のテキストです。 togetter.com/li/593728