Microsoft BI/DWH Day 2011 | SQL Server 2012

日 時 : 2011 年 12 月 12 日 (月) 会 場 : 目黒雅叙園 対 象 : ◆企業や組織において BI/DWH のシステム導入にかかわる方 ◆営業、マーケティングや事業企画など分析業務を行うビジネス部門の方 続きを読む
1
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

前半は大量データを扱う技術について、後半はその活用手法について。 #mssql #denali (live at http://t.co/8Pj3UTPU)

2011-12-12 13:06:55
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

タイの水害のような問題があったらサプライチェーン機能の停滞、ユーザニーズのトレンド変化(スマホ出荷急増、ソーシャル伝播)、これらを経験と勘に頼るのではなく意思決定の速度向上と多様化対応をどうアプローチするのかが Big Data 最大公約数である。 #denali

2011-12-12 13:09:18
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

Big Data とは、データが Big Data になった背景 変動制(統計データから流動データへ)、速度(年次から月次、日次へ)、多様性(刻々と変わる消費者ニーズ) ⇒ 集計から明細へ  #denali

2011-12-12 13:10:42
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

Big Dataへのチャレンジ理想と現実:BIツールで利用しているデータの頻度は年次12.2%, 四半期26.0%, 月次 33.2%, 週次6.6%, 日次18.2%, 時間3.8%, 現状では日次より鮮度が高いニーズは2割程度。  #denali

2011-12-12 13:12:20
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

旧来のITシステムが意思決定のボトルネック。ストレージ、処理速度が制約。 集計済みのサマリデータ、サマリデータから分析、(JOIN した TABLE がさらに無駄になっていくイケて無い会社みたいw) #denali

2011-12-12 13:13:40
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

導入された DWH は最新ですか?最新であればあるほどデータを蓄える手法や能力は高機能であるが、(Hadoop などの分散技術)システムとして活用する、コストを考えなければならないのが現状である。  #denali

2011-12-12 13:14:48
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

技術革新がもたらす Big Data に基づく意思決定。ソーシャルメディア、デバイス(社外の Big Data) を自社に取り込む活用は何があるのか?①連続データの圧縮、②(レンジ)パーティショニング、③カラムストア型のINDEX #denali

2011-12-12 13:16:43
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

従来とは違ってアプライアンスモデルで提供可能、隣の部屋で紹介する。 #denali

2011-12-12 13:17:53
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

ここまではデータを格納することについて、そしてソーシャルデータなどへのアプローチとして Hadoop などを使う環境が出来る。データを捨てることなく活用する、まずは失わずに取り込むことが肝要。  #denali

2011-12-12 13:18:45
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

①大量データを高速処理する基盤の整備、②データを活用するための基盤の整備、③ビジネスシーンでの実活用。 この後は SQL PM 北川さんがデモと説明へ  #denali

2011-12-12 13:19:25
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

Always on のテクノロジを含め、まず Big Data をビジネスに活かすために、 Hadoop 等の大量データ処理と DWH 格納したお話へ。  #denali

2011-12-12 13:20:32
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

大量データを高速に処理する技術として、Data Warehouse, Hadoop (Hadoop on Windows Azure, Hadoop on Windows Server) #denali

2011-12-12 13:21:10
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

データに関して分析するフェーズでは、DWH アプライアンスを使うと迅速に中規模までカバーできる。パラレル Data Warehouse、ファストトラック Data warehouse ベンダー体制が出来た。  #denali

2011-12-12 13:22:29
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

SQL Server 2012 カラム ストア (INDEX) in-memory で処理し、レポート単位ではなくカラム単位で処理を行うので非常に高速処理が可能。 // 並列計算できるなら HPC と合せてみたいなと。  #denali

2011-12-12 13:23:32
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

新しい SQL 2012 Studio で実演。 非クラスター化カラムインデックスをクリック一つで作成対応、(デモでは既に作成済み、まるで料理コンテンツみたいだw)  #denali

2011-12-12 13:24:57
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

どれくらい高速なのか、バッファクリアして実行(型を整形してカウントするクエリのように見えた)で、以前は 10秒程度かかったものが1秒に満たない処理速度で完了した。これを利用すればデータ分析が高速化となり可用性があがる。 Always On 機能を提供。  #denali

2011-12-12 13:27:01
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

サーバの監視機能を AlwaysOn コンソールで確認できる。猫の名前のようなサーバ名と思ったら、地名だった。 TAMA1, TAMA2 、、、 #denali

2011-12-12 13:27:57
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

// 場内キャパ 300名、集客率 目視でおよそ8割。スーツ7割、スマートカジュアル2割、カジュアル1割 といったところか。  #denali

2011-12-12 13:29:26
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

電源を落として自動継続(更新)デモが、、、うまく動作しているように見えない・・・。  #denali

2011-12-12 13:30:14
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

Microsoft が Enterprise 向け Hadoop 環境を提供する。 Azure も、もちろん。既存環境からのマイグレーション支援はパラレル Datawarehouse ベンダーからコネクタを提供する予定であるとな。  #denali

2011-12-12 13:31:18
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

北川さん有難うございました、次はいかに蓄積されたデータを活用するかについて。  #denali

2011-12-12 13:31:49
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

データ活用の成熟度は、7割は定型レポート・帳票作成、4割は非定型や定型パターンによる分析など。 企業にしか見いだせないインサイトを発見したいものの、実際はそこまで企業は習熟していない。それは何故か?  #denali

2011-12-12 13:33:14
斉藤之雄 / 社会福祉士 😺🗯 @yukio_saitoh

BI ツールを社員が使いこなせていない。そこで幾ら最新の Hadoop などを高速処理を提供しても( Map Reduce しても)フロントを使いやすいものとしないと宝の持ち腐れとなってしまう。  #denali

2011-12-12 13:34:06
1 ・・ 5 次へ