「JAWS-UG横浜 #66 AWS re:Invent 2023 Recap Database」のまとめ！！
-
- いいね！0
みのるん☁️
@minorun365
Zero-ETLの大文字/小文字ゆれ、分かりますｗ おそらく英語圏的にタイトル用法でキャピタライズされてる場合があるものの、通常は小文字なんじゃないかと想像。 #jawsugyokohama
2024-01-06 20:40:29
Takahiro Tanaka
@led_suezou
AWSの最大ユーザはAmazonだからなぁ。 内部の需要によるんだろうな。 #jawsug #jawsugyokohama
2024-01-06 20:50:08
Takahiro Tanaka
@led_suezou
スタートアップだとMySQLを使っているイメージが強かったけど、最近どうなんかな。 TiDBなんかは、MySQL互換で嬉しいって話をdb tech showcaseでは聞きましたが。 #jawsug #jawsugyokohama
2024-01-06 20:52:32
Takahiro Tanaka
@led_suezou
エンタープライズ検索の話はdb tech showcaseでの大畠さんのセッションが熱かったな。 #jawsug #jawsugyokohama
2024-01-06 20:54:52
Pretzelisa
@Pret2elisa
今後の課題 ・データのチャンクはどんな感じでなされてるのか ・S3に大量のデータを入れたときの挙動確認(syncの時間とか検索精度とか拡張子への対応とか) #jawsugyokohama
2024-01-06 21:04:55
s.hiruta
@web_se
zero ETLのソースデータベースの制限 Custom data types or data types created by extensions. docs.aws.amazon.com/AmazonRDS/late… #jawsugyokohama
2024-01-06 21:05:37
Takahiro Tanaka
@led_suezou
Zero-ETLで流し込んだ後、S3のデータレイクに戻しましょう的な話を下佐粉さんが言ってた気がする。 あくまでデータ分析の起点としてはS3にデータを蓄積するのが王道なんだろうな。 #jawsug #jawsugyokohama
2024-01-06 21:05:53
みのるん☁️
@minorun365
エキスパート達によるみっちり深い技術ディスカッション、これは横浜支部のウリですね。毎回楽しみです #jawsugyokohama
2024-01-06 21:05:59
hmatsu47(まつ)
@hmatsu47
そう、Neptune AnalyticsがGAになって何ができるようになったんだろう？と気になってた（これもベクトル検索が絡んでる）。 #jawsugyokohama
2024-01-06 21:12:31
hmatsu47(まつ)
@hmatsu47
ちなみにさっき話してたpgvectorでのベクトル検索用インデックスを含めてアドカレネタで書いたのがこちら（ともう一本続きの記事）。 qiita.com/hmatsu47/items… 記事に書いたとおりインデックスは「近似」最近傍探索用なのでリアルな最近傍探索にはならない可能性も。 #jawsugyokohama
2024-01-06 21:20:53
hmatsu47(まつ)
@hmatsu47
RDS for MySQLのzero-ETL統合は普通のbinlogを使ってデータ転送するので、事情があってAurora MySQLでenhancedじゃないbinlogを使い続けている勢にとっては「Auroraでも普通のbinlogのほうに対応してくれないかな」と思ってたり。 #jawsugyokohama
2024-01-06 21:24:06
s.hiruta
@web_se
Amazon OpenSearch Service がニューラル検索のマルチモーダルサポートを追加 aws.amazon.com/jp/about-aws/w… #jawsugyokohama
2024-01-06 21:28:55
hmatsu47(まつ)
@hmatsu47
いまのベクトル用のインデックスだと「インデックスを作成するとき」か「インデックスで検索するとき」の少なくともどちらかに時間がかかりすぎるはずなので。 （あと使うインデックスによっては定期的なインデックス再作成も） #jawsugyokohama
2024-01-06 21:34:43
s.hiruta
@web_se
LambdaとかVPC外からベクター検索する製品弱そうな。AuroraのDataAPIとかつかえそうだけど、VPCの外のサービスからだと穴あけないといけないところ #jawsugyokohama
2024-01-06 21:37:11
Hajime Oguri a.k.a. Guri
@maroon1st
来週のJAWS-UG横浜はこちらです〜 JAWS-UG横浜 #67 AWS re:Invent 2023 Recap Serverless jawsug-yokohama.connpass.com/event/299302/ #jawsug #jawsugyokohama
2024-01-06 21:41:48