Ceph構成

Number of replicas: 3
Minimum replicas: 2

mon,mgrについて

モニター(mon)は、「マスターマップを保持する」機能で、これの過半数がダウンするとCeph全体が停止する。
小規模構成なら3台が推奨されている。
マネージャー(mgr)は、「データ配置を監視して最適化する」機能で、同時に2つ以上が動作することはないが、複数ノードを有効化しておくと動作中のマネージャが停止したときに自動で移動する。
基本的にMonitorと同じノードに入れておけばOK。

Cephとは

小規模な構成なら3台に分散することが推奨されている。
実は10GbEの専用ネットワークが推奨されているが、現状1GbEで組まれている。
予算が許せば強化したいが、10GbEは高い...
このシステムでは、全データが3台のHDDに複製保存される。
よって1台のHDDが壊れてもダウンタイムなしで継続稼働することができる。
また、ノードごと落ちたとしても複数のノードに分散されるようになっているため、同じくダウンタイムなしで継続することができる。
だからといって問題を放置していたら次のノードが落ちたとき終わりなので、別に記載したマニュアルに沿って速やかに正常状態に戻すこと。