【デブサミ2018】16-A-L「とりあえずBigQueryに突っ込んでみたデータの活用法」 #devsumiA #devsumi

materia @materia_x64

【16-A-L】 とりあえずBigQueryに突っ込んでみたデータの活用法 #devsumiA

ゆぅりる♪ @yourilyouril

似顔絵ｪ #devsumiA

ゆぅりる♪ @yourilyouril

つかみが洋酒投資www #devsumiA

materia @materia_x64

安い。 #devsumiA pic.twitter.com/Ul1VSrB3ER

拡大

えんぷ@おっちゃー @s2_empnen

とりあえず入れたけど活用法がわからない←あるある とりあえず入れることすら許されない←現職 どうすれば:;(∩´﹏`∩);: #devsumiA

ゆぅりる♪ @yourilyouril

javascriptで書いたUDFをBigQueryに放り投げて働かせるのね。 #devsumiA

ゆぅりる♪ @yourilyouril

やべー。ねたがわかりすぎてつらい #devsumiA

Κεισουκε Μασουδα @narimasu_0717

「ヤフーを支える社内システム」普通の情シスのイメージとは違い過ぎた。必要なら作ってしまう文化。「IT業界のTOKIO」とか(・・;)。「自ら考え改善するサイクル」も、技術を使い倒せる環境も、サービスに活かせる。#devsumiA pic.twitter.com/dCSdaWgWiS

拡大

拡大

materia @materia_x64

狩っている人たちを解析。 #devsumiA pic.twitter.com/kqTg6d6KFq

拡大

拡大

拡大

拡大

ゆぅりる♪ @yourilyouril

DataStudio無料 #devsumiA

materia @materia_x64

無料。 #devsumiA pic.twitter.com/HMXrhsMayJ

拡大

ゆぅりる♪ @yourilyouril

DataStudioにはcacheとprefetchあるよ！ #devsumiA

ゆぅりる♪ @yourilyouril

誰の役にもたってないレポートで課金とかなにそれこわい #devsumiA

materia @materia_x64

うっかり課金を防ぐために、レポートを可視化 #devsumiA

ゆぅりる♪ @yourilyouril

いろいろ書いてますが、ポチポチやるだけです ← 味わい深い #devsumiA

えんぷ@おっちゃー @s2_empnen

使ってないクエリに課金される可能性あるのは少し怖い(っても価格はそんな気にならないんだろうけど) #devsumiA

ゆぅりる♪ @yourilyouril

リアルタイム分析基盤のためにはStreaming Insertを使う必要があるが、制限があるので注意が必要。この制限は拡張できない #devsumiA

ゆぅりる♪ @yourilyouril

たまにLoadで上書きするとStreaming Insertでの欠損の補填とか、料金のメリットあり #devsumiA

ゆぅりる♪ @yourilyouril

なので準リアルタイムでよければそうしよう #devsumiA

ゆぅりる♪ @yourilyouril

Loadにも上限あるので注意 #devsumiA

Kohta Ito @koh110

社内システムの話してきた！聞いてくださった皆様ありがとうございます！ #devsumi #devsumiA

ゆぅりる♪ @yourilyouril

日付別テーブルよりもパーティションテーブルを使おう。 #devsumiA

ゆぅりる♪ @yourilyouril

いまさらっと「僕も全件削除したことあるんスけど」って言ったよね(;´д｀) #devsumiA

H. NOMATA @hiromichinomata

BigQueryのUDFはJavaScriptで書け、SparkやHadoopと同等のことができる。無料のData Studioではキャッシュが利用でき、クエリキャッシュとプレフェッチキャッシュがある。クエリキャッシュはOFFにできず、定時で更新される。 #devsumiA

ゆぅりる♪ @yourilyouril

流しそうめん・・・(;´д｀) #devsumiA