第6回 コンテナ型仮想化の情報交換会＠東京 #lxcjp

Aki＠めもおきば @nekoruri

この分野ではMesosとかOmegaとかがある #lxcjp

Yoshikazu GOTO @goto_ipv6

劉さん：Dynamic Sharingって何？： ・まず反対のStatic Partitioningを #lxcjp

Sotaro Kimura @kimutansk

#lxcjp マルチテナントのPaaS上のResource Sharing問題に対して、Cluster Schedulerがどう対応するか、という話 Google OmegaとMesosをベースに説明と。

えむばーど @m_bird

batch系、service系と様々なワークロードがコンテナで行われるけれど、さてこれは実際どこで実行するのかの問題（=Cluster Scheduling） リソースの割り当てのもんだい、というかんじかな #lxcjp

Yoshikazu GOTO @goto_ipv6

劉さん：Static Partitioning： ・Webクラスタ、DBクラスタ、Hadoopクラスタなどのクラスタは、独自のサーバー群を持っていてシェアリングしません #lxcjp

Hiroaki Yutani @yutannihilation

Apache Mesos NYC Meetup // Speaker Deck speakerdeck.com/benh/apache-me… さっき出てたURLこれかな。 #lxcjp

Yoshikazu GOTO @goto_ipv6

劉さん：Dynamic Sharing： ・シングルクラスター内でマルチプルフレームワークを動作 #lxcjp

Aki＠めもおきば @nekoruri

今までWeb, DB, Hadoopといった個別のクラスタ(static partitioning)だったが、Mesosのように動的にリソースを共有することでさまざまなメリットがある #lxcjp

Yoshikazu GOTO @goto_ipv6

劉さん：Dynamic Sharingの課題： ・Cluster Shcedulingは複雑になる →ポリシーとか制限とか、シングルクラスターへのマージが必要に #lxcjp

Yoshikazu GOTO @goto_ipv6

→スケールは大きくなるので、スケジューラのワークロードも大きくなり、スケーラビリティのボトルネックになりやすい #lxcjp

Aki＠めもおきば @nekoruri

様々な特性を重ねることで統計多重効果を狙う、古くて新しくもある分野なんだよなー #lxcjp

Satoru MIYAZAKI @s_miyaza

#lxcjp 着いた

𝕋𝐞𝐧𝔽𝐨𝐫𝐰𝐚𝐫𝐝🖖 @ten_forward

Mesos と Omega #lxcjp

Aki＠めもおきば @nekoruri

リソース共有、マジメにやると複数タイムゾーン抱えてるグローバルなIaaSに勝てるきがしなくなるよね。。。 (午前4時問題とか) #lxcjp

Yoshikazu GOTO @goto_ipv6

劉さん：代表の2つ：MesosとOmega： ・Mesosはリサーチプロジェクトから生まれたOSSであり、大規模運用実績あり #lxcjp

Yoshikazu GOTO @goto_ipv6

・Omega（OSSではない） →Googleのnext-generation cluster management platform →OmegaというPaper：GoogleのCluster Scheduler, 2013 #lxcjp

Yoshikazu GOTO @goto_ipv6

劉さん：今日紹介したいのは論文 #lxcjp

Aki＠めもおきば @nekoruri

Borgって名前が格好良い #lxcjp

えむばーど @m_bird

Mesosとか、知らなかった（恥 jp.techcrunch.com/2013/09/27/201… #lxcjp

Yoshikazu GOTO @goto_ipv6

劉さん：Clouster Schedulerには3つのタイプが： ・Monolithic ・Two-level ・Share-state Schedulers →Omega #lxcjp

Aki＠めもおきば @nekoruri

これかな Scheduling on large clusters - Google's Borg and Omega, YARN, Mesos slideshare.net/sameertiwari33… #lxcjp

Yoshikazu GOTO @goto_ipv6

劉さん：Shceduler Architecture： ・Monolithic →スケジューリングロジックは1つ ・Two-level →スケジューリングロジックは2つ ・Shared State →各フレームワークはフルステート、全体の情報を持てる #lxcjp

えむばーど @m_bird

Clustor Scheduler の三つのタイプ、Monolithic, Two-level, Shared stateと分けられる。 と、ググったらなんか出てきた。 cl.cam.ac.uk/~ms705/pub/pap… #lxcjp

Yoshikazu GOTO @goto_ipv6

劉さん： ・Monolithic →no concurrency ・Two-level →pessimistic concurrency →リソースの割り当てと実のスケジュールは2段階 #lxcjp

Yoshikazu GOTO @goto_ipv6

・Shared State →optimistic concurrency →リソースの割り当てとスケジュールはそれぞれが #lxcjp