2020年11月3日火曜日

Apache mesos調査_paper_abstract

 諸々経緯があってApache Mesosを調べてみることに。

論文があったので、読んで理解を深める。

Mesos:  A Platform for Fine-Grained Resource Shareing in the Data Center

Abstract

Mesosはcomodity clusterを共有するplatform
対象はHadoop , MPI(Message Passing Interface)などclustering computing framework間

  • framework毎のdata replicationを排除
  • fine-Grained mannerでresourceを共有
各machineにstoreされたdataを順番にreadすることにより、frameworkにdata localityを実現。Mesosはdistributed two-level- scheduling(resource offers)を導入
各frameworkにどれくらいのresourceがofferできるか決める。
frameworkはどのresourceをacceptできるかとどの計算が実行できるか決める。
Mesosがframework間でclusterを共有するときに、ほぼ最適なdata localityを実現できる。

以降、一章ずつまとめていくかな。