PostgreSQLカンファレンス2014キーノート「NTT データと PostgreSQL が挑んだ総力戦 ～ PostgreSQL を極限まで使い切ったその先に見たものとは？ ～」 まとめ

Kazuhiro YOSHIKAWA @yoshikaw

つぎのキーノート「NTT データと PostgreSQL が挑んだ総力戦 ～ PostgreSQL を極限まで使い切ったその先に見たものとは？ ～ 」

Hiroshi Tokuda @tokudahiroshi

若手のホープの澤田さん #pgcon14j

ぬこ＠大阪 16.1 @nuko_yokohama

つづいて、笠原さんと澤田さんの発表。「NTT データと PostgreSQL が挑んだ総力戦 ～ PostgreSQL を極限まで使い切ったその先に見たものとは？ ～ 」 #pgcon14j

Hiroshi Tokuda @tokudahiroshi

基調講演その２はじまった。NTTデータの事例とプロジェクト現場のお話 #pgcon14j

ぬこ＠大阪 16.1 @nuko_yokohama

最近はNoSQLまわりやってるのかー。＞笠原さん #pgcon14j

Hiroshi Tokuda @tokudahiroshi

PostgreSQL と NTTデータの10年を振り返る歴史編がスタート #pgcon14j

ぬこ＠大阪 16.1 @nuko_yokohama

大規模案件でのPostgreSQLの当たり前でない使い方・・・だと・・・。 #pgcon14j

ぬこ＠大阪 16.1 @nuko_yokohama

事例：リアルタイム集計＋ディザスタリカバリ 構成自体はそこまでトリッキーではない。 #pgcon14j

Hiroshi Tokuda @tokudahiroshi

大人の事情キター #pgcon14j

Hiroshi Tokuda @tokudahiroshi

PosgreSQLは9.2だけど大量のモジュールを使ったことが特筆すべき点。 主に性能系。#pgcon14j

ぬこ＠大阪 16.1 @nuko_yokohama

ふむ。pg_bigmやpg_reorgも使っているのか（pg_repackではない） #pgcon14j

Hiroshi Tokuda @tokudahiroshi

24時間DBアクセス。昼夜問わず大量バッチ。メンテナンス設計が重要。数百GB以上の大規模テーブルの扱いに工夫。 #pgcon14j

Hiroshi Tokuda @tokudahiroshi

VACUUMが追い付かなかったらどうする？ 排他ロックは避けたい。pg_reorg と 自作ツールで排他ロックに対処。#pgcon14j

ぬこ＠大阪 16.1 @nuko_yokohama

VACUUM設計のポイント：大規模（数百GB）テーブルはautovacuumではなく、手動で実施。VACUUMできないときはpg_reorg/並列インデックス作成で対応。 #pgcon14j

yancya @yancya

えっ、すごいのでは -> "VACUUM FULL とか REINDEX をロック取らずに行う仕組み" #pgcon14j

Hiroshi Tokuda @tokudahiroshi

DRサイト。東日本－西日本間のデータ同期が課題だった。#pgcon14j

こうづえいすけ @cstyles_jp

#pgcon14j のタイムラインに目が行って仕事にならない(-_-;)

Hiroshi Tokuda @tokudahiroshi

DRサイト。Streaming-Replicationを採用。Fujii Masaoブランドを信じる。#pgcon14j

ぬこ＠大阪 16.1 @nuko_yokohama

DR検討のポイント：SRを採用、藤井さんのサポート（ずるいｗ）、アーカイブ圧縮＆転送 #pgcon14j

Hiroshi Tokuda @tokudahiroshi

SRでDR。レプリが追い付かなかったらどうする？　とかも想定して対策を立案した。#pgcon14j

yancya @yancya

Postgres 有識者とは #pgcon14j

Hiroshi Tokuda @tokudahiroshi

数万SQL,1000人規模の開発体制などなど #pgcon14j

Hiroshi Tokuda @tokudahiroshi

SQLの品質確保。5つの関門を通過したものだけが一人前のSQLとなるのじゃ #pgcon14j

yancya @yancya

SQL の静的解析 #pgcon14j

Hiroshi Tokuda @tokudahiroshi

SQLガイドライン、SQLチェックツール。リポジトリに登録すると静的なチェックツールが走る。#pgcon14j