デブサミ2011【17-C-1】Big Dataを扱うアーキテクチャの原則 萩原正義 氏 / 福井厚 氏
-
- いいね！0
Masayoshi Hagiwara
@masayh
デブサミのスライドだいたいできた。なかなかいい出来なので期待していい内容ではないかなと思う。時間がないので展開しだいだけれど、最新のいろいろな技術、原則を紹介できそう。大容量データ処理のOLAP技術、並列処理のデザインパターン、アーキテクチャー原則など。
2011-02-12 23:43:29
Masayoshi Hagiwara
@masayh
HadoopやNoSQLは前提だけれど、あえてそれを説明しない。それよりも大切なアーキテクチャーの原則があるから。NoSQLではカバーできないこと、まだ前提として考えていないことなど、紹介できればいいかも。
2011-02-12 23:45:22
Masayoshi Hagiwara
@masayh
デブサミは対談形式で、時間も短いのであまり突っ込んだ内容とはならないと思います。その分クラウドのスケーラビリティーに関するアーキテクチャーの原則論に限定します。より詳細な技術はQConで。http://qcontokyo.com/
2011-02-13 00:26:42
Masayoshi Hagiwara
@masayh
今後の高速バッチの実行はリアルタイムのクエリーとの組み合わせで設計していくべきでしょう。そこで１つの基準がバッチ実行結果のデータサイズ。その大きさがメモリサイズの大きさになるべくデータ分割すべき。これでクエリーの最適化のアルゴリズムの研究成果に持ち込める。
2011-02-13 13:41:06
Masayoshi Hagiwara
@masayh
お疲れ様です。しかしすごいですね。僕は10数ページですが全部図です。@ryu_kobayashi 大枠できたー。74ページ。PDFにしたら100近くなるな。
2011-02-14 00:07:52
Masayoshi Hagiwara
@masayh
@ryu_kobayashi 解説だと文字で逐次説明のほうがわかりやすいですね。僕のは対談で討論なので絵が中心になります。志向が違うのでまったくかぶらず、いい感じでつながるのでは。楽しみになってきました。
2011-02-14 00:39:21
かずき(Kazuki Ota) | Cloud Solution Architect at MS
@okazuki
@takeshik そうですよー、無料でこれだけのイベントがあるなんてさすが東京
2011-02-17 09:50:09
Fujio Kojima
@Fujiwo
デブサミC会場。これから萩原さん、福井さんの「Big Data を扱うアーキテクチャの原則」。楽しみ。 #devsumi
2011-02-17 10:04:59
Masakazu Matsushita
@matsukaz
#devsumi 最初のセッションはC会場へ。「Big Dataを扱うアーキテクチャの原則」。Microsoftの萩原( @masayh )さん。
2011-02-17 10:11:34
Dai Fujihara | コミュ障でもアジャイルコーチ
@daipresents
Big Dataを扱うアーキテクチャーの原則 データがクラウドに流れていっている #devsumi
2011-02-17 10:12:37