OCHaCafe2 #6 『Cloud Native × Streaming はじめの一歩』
- OracleDev_JP
- 1352
- 3
- 0
- 0
【OCHa Cafe2最終回🍔】 #ochacafe シーズン2 始まって半年。 5/13はシーズン2 最終回をオンラインで開催👨💻 今回は Spark Streaming をテーマに『Cloud Native × Streaming はじめの一歩』と題してお届け✨ もちろん、OCHa Cafe名物デモもあります! お気軽にご参加ください♪ ochacafe.connpass.com/event/169396
2020-05-11 17:47:18開始は19:00 ですけどね... 本日よろしくお願いします! #ochacafe twitter.com/kenken87647/st…
2020-05-13 13:24:06OCHaCafe Season 2 最終回です! 本日PM6:45から! Apache Sparkの初歩から応用をデモを交えてご紹介します。 簡単登録のウェビナーですのでご興味ある方ご参加ください! OCHaCafe2 #6 Cloud Native × Streaming はじめの一歩 ochacafe.connpass.com/event/169396/
2020-05-13 13:02:01例によって今日の #ochacafe でやるデモのソースを先に公開します github.com/oracle-japan/o…
2020-05-13 13:27:48#ochacafe season2最終回「 Cloud Native × Streaming はじめの一歩」の開始~! pic.twitter.com/Sb4YkFFlEh
2020-05-13 19:02:20始まりました! OCHaCafe2 #6 Cloud Native × Streaming はじめの一歩 ochacafe.connpass.com/event/169396/ #ochacafe
2020-05-13 19:04:16Apache Spark=並列分散処理プラットフォーム。バッリ、ストリーミング、統計/機械学習処理などに利用可能 #ochacafe
2020-05-13 19:11:21Hadoop の MapReduce の課題、中間処理による DiskI/O多発 彡(゚)(゚) #ochacafe
2020-05-13 19:12:20Apache Spark は M/R の課題に対して、メモリの活用でアプローチした。 彡(゚)(゚) #ochacafe
2020-05-13 19:13:52#ochacafe はオンラインのセミナーで今からでも参加できます ↓ oracle.zoom.us/webinar/regist…
2020-05-13 19:14:11従来のMapReduceは中間データをHDFSで管理するためディスクI/Oが大半を占めていたが、Sparkは中間データをメモリで管理することで、ディスクI/Oを削減した #ochacafe
2020-05-13 19:14:42本日はオンラインでこちらを視聴してます。 #ochacafe ochacafe.connpass.com/event/169396/
2020-05-13 19:14:52RDD(Resilient Distributed Datasets)、複数ノードのメモリに分散したパーティションを、一つのデータ単位として扱う仕組み 彡(゚)(゚) #ochacafe
2020-05-13 19:17:08RDD(Spark 1.0) → DataFrame(Spark 1.3) → Dataset(Spark 2.0) とバージョンと共に分散コレクションのタイプが増えている。 彡(゚)(゚) #ochacafe
2020-05-13 19:20:04分散コレクションタイプの名前、RDD→DataFrame→Datasetという流れが機械学習を意識しているように見えてしまう...(違うと思うけど #ochacafe
2020-05-13 19:21:22