2014.09.16 gcp ja night #28 #gcpja
進化形というか,元々BigQueryなどで使われているMPPモデルがあって,その後Hadoopの隆盛が来て,またHadoopの上で動くMPPが出来て,データ量の増加に伴ってまた盛り上がっているという感じ #gcpja
2014-09-16 19:48:43BigQueryのユーザー定義関数(User Defined Function/UDF)って、まだ来てないんだっけ? #gcpja
2014-09-16 19:49:14Kubernetesって技術的に面白そうなんだけど、自分がGoogle規模で使うことはないだろうなぁと思うと、さてどこに使おうか?ってのは難しいかなぁ。趣味としてはありだけど #gcpja
2014-09-16 19:49:54#gcpja BigQueryはGoogle社内で使われてた Dremelをサービス化したもの research.google.com/pubs/archive/3…
2014-09-16 19:50:01bigquery streamingAPIが登場して、社内ポリシーが許せば、いますぐbigquery使うのだけど。。 #gcpja
2014-09-16 19:51:09#gcpja BigQueryのWeb Interface bigquery.cloud.google.com
2014-09-16 19:51:34最近、BigQueryに追加されたやつで便利そうだなーと思ったは、Table functionsです。 developers.google.com/bigquery/query… 月ごととかでTable分けることがよくありますが、Rangeを指定して取ってこれるよ。 #gcpja
2014-09-16 19:55:31bigquery、ストリーミングAPIがあるのはredshiftに対してかなりアドバンテージな気がする #gcpja
2014-09-16 19:58:07GAEで履歴系データをdatastoreに保存してたのを、BigQueryのstreaming insertにして課金かなり減らせた #gcpja
2014-09-16 20:00:02#gcpja BigQuery、1000億行を20秒で処理できるとして、1000億行のデータをアップロードするのにどれぐらい時間がかかるでしょうか。
2014-09-16 20:00:14