第7回 PostgreSQLアンカンファレンス＠東京

Takuma Wakamori @twakamor

kaigai さんによる PG-Strom の話．OLTP や OLAP ではなく， In-place Computing のワークロードを想定．#pgunconf

ぬこ＠大阪 16.1 @nuko_yokohama

#pgunconf 分散を比較して同じ集合か判断するワークロードで試す。 携帯電話の加速度データをオープンにしているものを使ってみた。

ゆー。 @_y_u_

#pgunconf 実行計画上、85行だと思ってたところが実際には47万行！みたいなことになってた。なので行数推定を読み解いた

でんぞう @denzowill

#pgunconf 複数条件でのプランナの見積りの話かしら

ぬこ＠大阪 16.1 @nuko_yokohama

#pgunconf Rで書いてみたもの。SQL書いてみたもの。 Rだと3GB転送＋計算：30秒 PostgreSQLだと4秒 PG-Stromだと1.7秒。データ転送の時間がとても大きい。

ゆー。 @_y_u_

@nuko_yokohama pg歴2ヶ月、sansanの中の人 #pgunconf

Takuma Wakamori @twakamor

In-Database の処理はデータロードが不要なので，Rで30秒かかる処理もPGなら3秒，PG-Stromなら1.7秒で完了．#pgunconf

Kasahara Tatsuhito @kasa_zip

なるべく特性の違う化合物をDBから抽出して、創薬の実験に回す・・ #pgunconf

ぬこ＠大阪 16.1 @nuko_yokohama

#pgunconf 次の検証。創薬でもワークロードの話。化合物データベースから、「できるだけ特性の違う化学物質を選びだす」 なんか、42種類くらいの特性がある。42次元の計算ってこと？

sunnyone @_sunnyone

postgresql.jp/document/9.4/h… 第 61章プランナが統計情報をどのように使用するか #pgunconf

Kasahara Tatsuhito @kasa_zip

使ったのはMin-Max Method これをSQLで記述すると距離計算(sqrt)を大量に羅列することになり 重い・・ #pgunconf

Takuma Wakamori @twakamor

化合物の集合から，ある化合物に対して最も構造の異なる化合物を探す処理もPG-Stromで実行できる．MAX-MIN Methodという手法で距離計算．#pgunconf

ぬこ＠大阪 16.1 @nuko_yokohama

#pgunconf 最初に1個ランダムに1個選び、そこから42次元で最遠のものを選択、そしてクラスタ化・・・みたいな演算を延々繰り返す。 SQLで書く距離演算が重い。

ゆー。 @_y_u_

#pgunconf 推定行数=pg_class.reltuples*(?) (?)=条件句によって異なる。 条件なし：1、 範囲条件：度数分布率、 一致条件：最頻値に含まれるかどうかで異なり、含まれない場合一様分布を前提に推定、 複合条件：各条件の選択度の積

ぬこ＠大阪 16.1 @nuko_yokohama

#pgunconf PL/CUDAの話。SQLの関数内（ AS $$ ... $$ )に、CUDAの関数を書き加えてGPUに送る、みたいな仕組み。

Kasahara Tatsuhito @kasa_zip

PL/CUDAでSQLからCUDA実装を呼び出せるようにする・・ #pgunconf

Takuma Wakamori @twakamor

PL/CUDA ，SQLの集合データに対する演算を GPU の CUDA のネイティブで実行して，結果を再びSQLの世界へ．HPC の世界でやってることをDBでもできるようにする．#pgunconf

ぬこ＠大阪 16.1 @nuko_yokohama

#pgunconf k-meansをGPUの中でぶん回すと高速化できるはず、という。あと数週あれば実装できたと思う。次回のアンカンファレンスにご期待ください。

:tom__bo: @tom__bo

slony開発自体は止まっていないようです 失礼しました / twitter.com/snaga/status/7… #pgunconf

Satoshi Nagayasu (@snaga@mstdn.social) 🌸🍶 @snaga

@nuko_yokohama Gitの方は更新されてますけど、正式なリリースはされてないですね。 git.postgresql.org/gitweb/?p=slon… #pgunconf

2016-05-28 14:33:32

でんぞう @denzowill

#pgunconf 複合条件は、独立した条件として推定されているので * プランなの推定にしたがった表に作りなおす * ヒント句つかう * 統計情報を無理やり書き換える

Shigeru Hanada @s87

やはり行数推定は複合条件での精度が問題になるのかな(斜め聞き #pgunconf

ぬこ＠大阪 16.1 @nuko_yokohama

#pgunconf QA.Apache Matlib(綴りわかんない)との差異化は？というQA. 回答は・・・あとで海外さんに説明かいてもらおう。

sunnyone @_sunnyone

統計情報の改竄やばい #pgunconf

くまー @kumake1004

#pgunconf 行数推定が正しくないときはどうする？正しくなるようテーブルを作る、ヒント句、統計情報を改竄する

ゆー。 @_y_u_

#pgunconf 複合条件(AND句)のときの推定行数を見たら、今回の場合には独立(関数従属しない)という仮定が成立してないことがわかったが…。 ・複合条件をやめる ・ヒント句をつかう(局所チューニング、本質的な問題解決ではない) ・統計情報の改竄(楽しそうｗ)