Google Cloud Community Fest. DogRun - BigQuery / Dataflow Fireside Chat

Dogrun 2018 @ Google Cloud Next'18 Tokyo の #room7 に関するツイートをまとめました。
3

Room7ではBigQueryとDataflowのFireside Chatが行われました。

※実際の会ではBigQueryとDataflowの質疑応答が交互に行われましたが、当まとめでは読みやすさ重視で分けます。

アイスブレイクは#bq_sushiの名前の由来について

_ @apstndb

#bq_sushi の由来を解説中。分散処理の重鎮の人たちも集まって BigQuery Analytics の読書会をやっていた。六本木寿司居酒屋で毎回打ち上げをしていたため、 寿司の写真をあげながら「これが BigQuery だ!」とあげていたことで名前ができた #room7 #gcpja

2018-09-19 20:04:50
kay @keiko_sunflower

六本木の寿司居酒屋まっちゃんww #bq_sushi

2018-09-19 20:04:53
さとし 📷🌟🗻☕️ Satoshi @ysmr3104

#bq_sushi はお寿司が出るイベントじゃなかった!

2018-09-19 20:05:37

BigQueryに関する質疑応答

Q. PythonでUDFを書けるようになる予定はある?

A. Pythonの実装予定はない。ただし、WebAssemblyによるUDFの実装を予定している。

_ @apstndb

早速質問タイム。 Q: UDF を Python でかけるようになりませんか。とあるプロダクトからの移行でそこが面倒です A: 今のところは予定がない #room7 #gcpja

2018-09-19 20:07:43
_ @apstndb

BigQuery の WASM UDF が近々サポートされる。V8 だから WASM 動かせることは確認していたけど本当にサポートするのか。 #room7 #gcpja

2018-09-19 20:09:08
定本 @nattobeats

Pythonで書けるようになる予定はない。CをコンパイルしてUDFに出来るようになる?? #room7 #gcpja #bq_sushi #GoogleNext18

2018-09-19 20:08:59

Q. ORDER BYによるresource exceeded出現頻度は下げられない?

A. まもなく改善され、ORDER BYによるResource exceededはほとんど見られなくなる。

_ @apstndb

Q: ORDER BY で resource exceeded エラーが出るのは仕方ないが、 Window 関数内の ORDER BY は致命的なのでどうにかならないか A: Q4 ORDER BY での resource exceeded は改善され、おきなくなるだろう #room7 #gcpja

2018-09-19 20:11:02
定本 @nattobeats

ORDER BYによるresource exceededは仕方ないけど、window関数内では必要不可欠だからなんとかならん? #room7 #gcpja #bq_sushi #GoogleNext18

2018-09-19 20:10:13
定本 @nattobeats

ORDER BYでresource exceededは出なくなるだろう。#room7 #gcpja #bq_sushi #GoogleNext18

2018-09-19 20:11:19

ORDER BYでなぜresource exceededが出てしまうのか具体的なアルゴリズムなどを交えて説明いただきました。

_ @apstndb

BigQuery ORDER BY のアルゴリズムの秘密が語られた #room7 #gcpja

2018-09-19 20:13:04
定本 @nattobeats

ORDER BYの処理を分散するように改修中 #room7 #gcpja #bq_sushi #GoogleNext18

2018-09-19 20:13:06
定本 @nattobeats

BQMLのモデルをGCSにエクスポート出来ないか? #room7 #gcpja #bq_sushi #GoogleNext18

2018-09-19 20:23:54
1 ・・ 4 次へ