第27回 名古屋CV/PRML勉強会のツイートまとめ

はる @fararrow9

飴タイム #nagoyacv

おさかなさん @sakanazensen

映像の構造を利用したニュース映像の要約 #nagoyacv

おさかなさん @sakanazensen

平成生まれは5W1Hという概念を中学校で教わりましたｗ #nagoyacv

エンジニアサンダ大先生 @xxSANDAxx

5W1Hが大事なんだ #nagoyacv

おさかなさん @sakanazensen

Who: 誰が出てるかで構造化とか、名寄せ（首相＝総理＝自民党総裁＝アベシ、みたいな）、、、 #nagoyacv

おさかなさん @sakanazensen

きっかけ： 「政治家って言うこと変わるから投票先迷うがな＞＜」 「過去のニュース映像から発言を検索できるといいね！」 「誰と仲いいかもわかるといいよね！」 #nagoyacv

おさかなさん @sakanazensen

デモを作った：投票意思決定支援ツール"NewsWho'sWho" #nagoyacv

おさかなさん @sakanazensen

なにこれすごい #nagoyacv

Hironobu Fujiyoshi @hf149

投票意思決定支援ツール：NewsWho'sWho PDF→http://t.co/mTiyaW6czn #nagoyacv

エンジニアサンダ大先生 @xxSANDAxx

これ投票の時に便利そう #nagoyacv

おさかなさん @sakanazensen

state-of-the-artsな要素技術とデータ量の力技を組み合わせて作りなおすとすごいものになりそう感 #nagoyacv

おさかなさん @sakanazensen

ムバラク大統領と（ニュースにおける）共起関係が強いのはブレア首相、みたいな。 #nagoyacv

おさかなさん @sakanazensen

どういう文脈で共起してるのかという構造も見れるよ！ #nagoyacv

はる @fararrow9

関係が強いワード≒仲が良いｗ #nagoyacv

おさかなさん @sakanazensen

イマドキSNSでは似たようなことを使いやすい情報をもとにしてやってるけど、それよりずっと早い時期に映像とCCだけでやってるのがすごい #nagoyacv

はる @fararrow9

野球で試すと佐川のおっちゃんも興味を持つ結果が得られる(^o^)/ #nagoyacv

おさかなさん @sakanazensen

言葉では語られない関係が映像には！！！！１！ #nagoyacv

Hironobu Fujiyoshi @hf149

多くはテキスト情報に頼っているが、画像情報（顔認証）も利用することで、表に出てこない人物関係を知ることができる!? #nagoyacv

はる @fararrow9

顔照合による言葉では語られない(当たり前のごとく傍に居る？)関係の抽出ｗ #nagoyacv

おさかなさん @sakanazensen

人物照合をするときに名寄せの難しさが問題となった→テキストベースでは高度な知識や大規模なDBが必要だけど、画像を噛ませれば現実的 #nagoyacv

はる @fararrow9

田中さん多すぎて名寄せ結果多し(今ならまーくんも多く出てきそう)→顔照合でクラスタリング #nagoyacv

おさかなさん @sakanazensen

ニュース映像の性質として、映像がモノローグ（被写体＝音声の話者）とは限らないことがある #nagoyacv

おさかなさん @sakanazensen

番組冒頭はアナウンサーであるという仮定などもとにアナウンサーの声を学習すれば、モノローグシーンの検出ができる #nagoyacv

おさかなさん @sakanazensen

とはいえ、やっぱり画像特徴と音声特徴の相関で正攻法が必要になった #nagoyacv

はる @fararrow9

紫唇が思い出される研究の紹介が… #nagoyacv