Hadoopソースコードリーディング第17回

Apache Tezの回 ■アジェンダ:(リンクは発表資料) ・Tez Internals (@oza_x86 さん) https://gist.github.com/oza/470e961ff10b60778772 続きを読む
hadoopreading
0
Kenichiro HAMANO @hamaken
9月9日に開催するHadoopソースコードリーディング 第17回の構成がほぼ決まった。Apache Tezネタです。本日中に参加登録を開始できるようにするつもりです。 #hadoopreading
Kenichiro HAMANO @hamaken
【告知】 9月9日に、Apache Tezをテーマに Hadoopソースコードリーディング 第17回を開催します → hadoop-scr17th.eventbrite.com #hadoopreading
Kenichiro HAMANO @hamaken
(続き) Tez開発に関わる @oza_x86 氏による「Tez internals」、@marblejenka 氏による「アプリケーションエンジニアから見たTez」の発表を予定しています hadoop-scr17th.eventbrite.com #hadoopreading
MasahitoKawai @seaweedsept
どうしようかなぁ… “@hamaken: 【告知】 9月9日に、Apache Tezをテーマに Hadoopソースコードリーディング 第17回を開催します → hadoop-scr17th.eventbrite.com #hadoopreading
Kenichiro HAMANO @hamaken
明日のApache TezなHadoopソースコードリーディング 第17回が いつのまにか定員に達していたので、5名分を増枠しておきました #hadoopreading hadoop-scr17th.eventbrite.com
Kenichiro HAMANO @hamaken
本日のHadoopソースコードリーディングですが、(前回と同様)いつものビルの隣なので、要注意です! #hadoopreading
Kenichiro HAMANO @hamaken
本日のApache Tezな「Hadoopソースコートーリーディング 第17回」のUst配信は、ここで見れるかも → ustream.tv/channel/hadoop… 片手間での配信なので、適当ですがお許しを。 #hadoopreading
k_yoshida @ysd061
Hadoopソースコードリーディング17回〜Tez編〜@豊洲 参加者、昨日のSparkと半分くらいかぶってるのでは。 #hadoopreading
Kenichiro HAMANO @hamaken
. @oza_x86 さんによる Tez Internals が始まりました! #hadoopreading
k_yoshida @ysd061
Sparkとの違いについて聞こうと思ってたら既にまとまっていた。/ リピさんとオザさんのTezとSparkの会話 - Togetterまとめ togetter.com/li/717215 #hadoopreading
tagomoris @tagomoris
TezのDSLは人間が書くものではない #hadoopreading
AOE Takashi @aoetk
Ustで見てると、顔認識カメラを使っているのか、顔に常に枠が映っているw #hadoopreading
tagomoris @tagomoris
All-in-one のSparkとlayer毎にプロダクトを分ける選択のTez #hadoopreading
tagomoris @tagomoris
Spark自信がユーザフレンドリなDSLを公開APIとして揃えるためにはRDDが要るんだろなという気がする #hadoopreading
tagomoris @tagomoris
Tezは自分はまじで dynamic reconfiguration に期待している #hadoopreading
marble @marblejenka
#hadoopreading Optimusこれか research.microsoft.com/apps/pubs/defa… Dryadよりアグレッシブに統計情報を取れるようにするらしい
tagomoris @tagomoris
DIに強い拒否感を示す世代のJavaプログラマ @oza_x86 先生 #hadoopreading
AOE Takashi @aoetk
Ustをながら見してますが、「TezのソースはモダンJavaっぽくて綺麗」という話が耳に飛び込んできた。 #hadoopreading
tagomoris @tagomoris
TezのschedulingType CONCURRENTは定義はあるがまだ実装されてないw 現状はSEQUENCIALのみ #hadoopreading
marble @marblejenka
#hadoopreading DataMovementType.CUSTOM とかがある。EdgeManagerPluginDescriptorとかを実装すると特殊な挙動を与えられそう。
Akihiro Okuno @choplin
tezのwordcountのコード、手でDAGを一つ一つ組み上げることで暖かみの(ry という感じがする #hadoopreading
k_yoshida @ysd061
TezのAPI、なんとなくStormのAPIに似てる。Vertex→Bolt、DataMovementType→StreamGroupingsな位置づけ。 #hadoopreading
残りを読む(26)

コメント

コメントがまだありません。感想を最初に伝えてみませんか?

ログインして広告を非表示にする
ログインして広告を非表示にする