Hadoop・Sparkのコミッター陣が語る 星降る夜空で象に寄り添うには #CROSS2016 #CROSS2016a

コラコラ、Hadoop や Spark よ!君たちそれでよいのかい!? @shimtoru @ajis_ka @iwasakims @oza_x86 @raspberry1123 @ryu_kobayashi http://2016.cross-party.com/program/a4
2
Akira Ajisaka @ajis_ka

PythonでSparkアプリ書くならRDDよりDataFrame #cross2016a

2016-02-05 16:11:48
abenben.eth @abenben

来週月曜日はHadoop / Spark Conference Japan 2016 でも今日CROSSに来てる人たちにはいつになったら会社行くかが問題かな? hadoop.apache.jp/hcj2016-progra… #cross2016a

2016-02-05 16:12:45
tagomoris @tagomoris

AppMasterが消費するリソースの計算まじめんどくさい #CROSS2016a

2016-02-05 16:12:46
Kenichiro HAMANO @hamaken

同じジョブ動かしていても、YARNにすると全体として食うリソース量が増えちゃう問題 #cross2016a

2016-02-05 16:13:05
Kenichiro HAMANO @hamaken

ぶっちゃけ?スロットの方が計算(コントロール)しやすくない? by @ryu_kobayashi #cross2016a

2016-02-05 16:14:02
Kenichiro HAMANO @hamaken

ちょっと前のバージョンのYARNだと、マスター機能ばかりが立ち上がり過ぎて、計算するノードがほとんどあがってこないというお茶目な状況だった。今はその心配はなくなった by @oza_x86 #cross2016a

2016-02-05 16:15:27
SKS rep @repeatedly

なんでや!でかいXMLとかJavaだとよくあるやろ!! #cross2016a

2016-02-05 16:16:50
Sadayuki Furuhashi @frsyuki

YARN-4039 とか YARN-624 とかどうなったんですかね? issues.apache.org/jira/browse/YA… #cross2016a

2016-02-05 16:17:02
Kenichiro HAMANO @hamaken

TDでも 俺俺スケジューラを作りたい話がちょいちょい出てきている by @ryu_kobayashi #cross2016a

2016-02-05 16:20:23
tagomoris @tagomoris

スケジューラ足したいけど、もうちょっと綺麗に整理されたAPIになってるとやりやすいですね! #cross2016a

2016-02-05 16:21:21
Kenichiro HAMANO @hamaken

「ぜひ日本のユーザーからの声をあげてほしい」 by @oza_x86 コミッタ、PMCらしい発言だー #cross2016a

2016-02-05 16:22:21
Kazunori Otani @katzchang

MLに投げる。。。「不具合である」みたいなのも、結構使い込まないとわからなかったり。 #cross2016a

2016-02-05 16:22:48
Kenichiro HAMANO @hamaken

Hadoopコントリビュータの身辺調査をやっているので、誰がどういうリクエストをしているのか かなり把握している by @ajis_ka #cross2016a

2016-02-05 16:23:27
K. Ishizaki @kiszk

contributeすると身辺調査が入る? #cross2016a

2016-02-05 16:24:11
SKS rep @repeatedly

HadoopもSparkも,ドキュメントがダメという話 #cross2016a

2016-02-05 16:24:46
Sotaro Kimura @kimutansk

#cross2016 #cross2016a oza先生にツイートすれば日本語でHadoop/Sparkに貢献できるサービスw

2016-02-05 16:27:07
K. Ishizaki @kiszk

日本語でリプすると、英語のJIRAエントリが立つサービス #cross2016a

2016-02-05 16:27:32
Kenichiro HAMANO @hamaken

ドキュメントはコントリビュートするのは敷居が低いので、ぜひチャレンジしてほしい by @iwasakims #cross2016a

2016-02-05 16:29:49
SKS rep @repeatedly

Spark,Java8で運用している人いないのか #cross2016a

2016-02-05 16:30:05
Kazunori Otani @katzchang

今はJava7, Java8は事例がほとんどないからトラブルあんまり報告されないのかも的な #cross2016a ありがたやー

2016-02-05 16:30:33
Sadayuki Furuhashi @frsyuki

Java 8、コードを直接書く立場だと、無いと死んじゃうけどなぁ。 #cross2016a

2016-02-05 16:31:00
K. Ishizaki @kiszk

Java8でbuildしたSparkは、Java7では動かせない #cross2016a

2016-02-05 16:31:09