AWS Loft TokyoテクニカルセミナーAnalytics Architecture Night時のツイートまとめ
- surumegohan
- 1687
- 5
- 0
- 0
いま解説している Kinesis Video Streams と Rekognition Video のサンプルのリポジトリです #awsloft github.com/awslabs/amazon…
2018-10-05 20:21:09質問したら 「はい!するめごはんさん!」とか言われた件w というわけで「スライド公開されますか?」と質問したら、今日3人とも公開してくれることになりました!! Amazonさん本当にありがとうございます!! #AWSLoft
2018-10-05 20:28:11Spectrum Redshift にためたデータとS3にためたデータを結合できる!? すげーー #AWSLoft
2018-10-05 20:38:17Redshift のいいところ ノード増やせば早くなるけど、頻繁にノード追加はそんなにできない。 そこでチューニングだ!! #AWSLoft
2018-10-05 20:39:28パフォチューポイント ディスクIOを削減する! 読みだす範囲やサイズをいかに減らせるか ノード間通信を削減する! 通信しないようなデータ配置 クエリごとに必要なリソースを適切に割り当てる! メモリ資源を効率的に利用 #AWSLoft
2018-10-05 20:42:18データ圧縮かー ロードしたあとにANALYZE COMPRESSIONコマンドで推奨を確認する! ANALYZE COMPRESSION テーブル名; 選択に迷ったらZSTDまたはLZO パフォーマンス面でLZOが勝る場合がある #AWSLoft
2018-10-05 20:46:31ゾーンマップ(ブロックフィルタリング) ゾーンマップの活用むずそうだ ソートキーを頻繁に使われるWHERE句条件キーが筆頭候補! 一般的には日付などの時系列やIDに多い #AWSLoft
2018-10-05 20:48:51実行計画のDS_*オペレータをみつける DS_BCAST_INNERだとJOIN時に内部表で全部みてる #AWSLoft
2018-10-05 20:53:28