Databricks Tech Talks Vol.1 - 我々はこう使ってる!赤煉瓦倉庫勉強会第1回 ツイートまとめ
自分も今度SQLの勉強会やるので、参考にさせていただきます。 #redbricks pic.twitter.com/IgBoWDIxvn
2024-04-25 19:22:25これ!ほんと偉い! ほんとに着実なのよ...! #redbricks pic.twitter.com/RPOUpFqRqA
2024-04-25 19:22:41databricksにためた後のデータ加工が多すぎ問題。 データ取り込みリクエストが増えたからこそ。 個人情報マスクは必ずあるよね #redbricks pic.twitter.com/ewJFIpeVXf
2024-04-25 19:22:46このセッション、めっちゃ面白いなー 苦労話ほど参考になるものは無い・・・! #redbricks
2024-04-25 19:24:34データエンジニア足りない問題ありますね、、! #redbricks pic.twitter.com/onB3yrtQLZ
2024-04-25 19:24:50ひー。ストレージコストはそりゃあかかるよなぁ。 コスト分析もdatabricks でやっているらしい? それも面白いなw #redbricks pic.twitter.com/0F7r7z7YpX
2024-04-25 19:26:54わかりみ深い。ワークスペース管理者からユーザー改廃作業の代行を依頼された一般ユーザーが、ワークスペース管理者権限持ったロールにスイッチロールして一時的にユーザー改廃作業をさせるとか出来ないかな。 #redbricks pic.twitter.com/lOPvzQE7Fi
2024-04-25 19:27:22おお、今後Salesforce や社内にあるあらゆるデータをdatabricks で分析できるようにしていきたい! とな。 #redbricks pic.twitter.com/G9IrzZa9Mm
2024-04-25 19:28:13マネーフォワードさんのデータ分析基盤は、AWS databricks・BigQuery Tokyo・BigQuery US の3環境がある? #redbricks pic.twitter.com/kMdSV1tXak
2024-04-25 19:32:18マネーフォワード様のセッションです!アプリお世話になっています! #redbricks Databricks Tech Talks Vol.1 - 我々はこう使ってる! - connpass redbrick.connpass.com/event/310229/
2024-04-25 19:32:243つの分析環境があるよ、Databricks on AWSと、BigQuery(Tokyo,US) Databricksの環境は一番セキュアな分析環境になっている #redbricks pic.twitter.com/e6MBAvswgG
2024-04-25 19:33:20データのセキュリティレベルで、Databricks、BigQueryを使い分けている。Databricksは閉塞な環境用としている #redbricks
2024-04-25 19:34:11AWS MySQL・AuroraからDMSを使って、CDCでAmazon S3にデータを吐き出して、databricks で分析できるようにしているらしい docs.aws.amazon.com/ja_jp/dms/late… #redbricks
2024-04-25 19:34:51なるほどー。論文執筆で過去断面の参照用途があって、databricks 導入前からDelta Lakeを使っていたのか。 #redbricks pic.twitter.com/qTkz4d3ovW
2024-04-25 19:37:33前環境の課題、、、Squid運用大変そう(小並感 #redbricks pic.twitter.com/vuslsIXFUN
2024-04-25 19:38:04Before <-> After #redbricks pic.twitter.com/wRUMBtgwLC
2024-04-25 19:39:03