Google Cloud Community Fest. DogRun - BigQuery / Dataflow Fireside Chat
- nattobeats
- 1674
- 7
- 0
- 2
Room7ではBigQueryとDataflowのFireside Chatが行われました。
※実際の会ではBigQueryとDataflowの質疑応答が交互に行われましたが、当まとめでは読みやすさ重視で分けます。
こちらの部屋でやっていきます。#room7 #gcpja #GoogleNext18 pic.twitter.com/lU5KyJKnAk
2018-09-19 19:45:41アイスブレイクは#bq_sushiの名前の由来について
#bq_sushi の由来を解説中。分散処理の重鎮の人たちも集まって BigQuery Analytics の読書会をやっていた。六本木寿司居酒屋で毎回打ち上げをしていたため、 寿司の写真をあげながら「これが BigQuery だ!」とあげていたことで名前ができた #room7 #gcpja
2018-09-19 20:04:50BigQueryに関する質疑応答
Q. PythonでUDFを書けるようになる予定はある?
A. Pythonの実装予定はない。ただし、WebAssemblyによるUDFの実装を予定している。
早速質問タイム。 Q: UDF を Python でかけるようになりませんか。とあるプロダクトからの移行でそこが面倒です A: 今のところは予定がない #room7 #gcpja
2018-09-19 20:07:43BigQuery の WASM UDF が近々サポートされる。V8 だから WASM 動かせることは確認していたけど本当にサポートするのか。 #room7 #gcpja
2018-09-19 20:09:08Pythonで書けるようになる予定はない。CをコンパイルしてUDFに出来るようになる?? #room7 #gcpja #bq_sushi #GoogleNext18
2018-09-19 20:08:59Q. ORDER BYによるresource exceeded出現頻度は下げられない?
A. まもなく改善され、ORDER BYによるResource exceededはほとんど見られなくなる。
Q: ORDER BY で resource exceeded エラーが出るのは仕方ないが、 Window 関数内の ORDER BY は致命的なのでどうにかならないか A: Q4 ORDER BY での resource exceeded は改善され、おきなくなるだろう #room7 #gcpja
2018-09-19 20:11:02ORDER BYによるresource exceededは仕方ないけど、window関数内では必要不可欠だからなんとかならん? #room7 #gcpja #bq_sushi #GoogleNext18
2018-09-19 20:10:13ORDER BYでresource exceededは出なくなるだろう。#room7 #gcpja #bq_sushi #GoogleNext18
2018-09-19 20:11:19ORDER BYでなぜresource exceededが出てしまうのか具体的なアルゴリズムなどを交えて説明いただきました。