MFS - MooseFS 文件存儲系統(tǒng)

MFS

MooseFS 文件系統(tǒng) 可以實現(xiàn)RAID 功能；節(jié)約成本 實現(xiàn)在線擴展；是一種半分布式文件系統(tǒng)。

一、MFS文件系統(tǒng)的組成：

1、 mfsmaster

  元數(shù)據(jù)服務(wù)器。在整個體系中負(fù)責(zé)管理管理文件系統(tǒng)，目前MFS只支持一個元數(shù)據(jù)服務(wù)器master，這是一個單點故障，需要一個性能穩(wěn)定的服務(wù)器來充當(dāng)。希望今后MFS能支持多個master服務(wù)器，進一步提高系統(tǒng)的可靠性。

2、 數(shù)據(jù)存儲服務(wù) chunkserver

  存儲用戶數(shù)據(jù)的服務(wù)器。存儲文件時，首先把文件分成塊，然后這些塊在數(shù)據(jù)服務(wù)器chunkserver之間復(fù)制（復(fù)制份數(shù)可以手工指定，建議設(shè)置副本數(shù)為3）。數(shù)據(jù)服務(wù)器可以是多個，并且數(shù)量越多，可使用的“磁盤空間”越大，可靠性也越高。

3、 MFS客戶端

  使用MFS文件系統(tǒng)來存儲和訪問的主機稱為MFS的客戶端，成功掛接MFS文件系統(tǒng)以后，就可以像以前使用NFS一樣共享這個虛擬性的存儲了。元數(shù)據(jù)服務(wù)器安裝和配置元數(shù)據(jù)服務(wù)器可以是linux,也可以是unix,你可以根據(jù)自己的使用習(xí)慣選擇操作系統(tǒng),在我的環(huán)境里,我是用freebsd做為MFS元數(shù)據(jù)的運行平臺。GNU源碼，在各種類unix平臺的安裝都基本一致。

二、基礎(chǔ)架構(gòu)  

MFSmaster ：10.10.100.101

Metalogger： 10.10.100.102

Metalogger也可以和master在同一臺

Chunkserver：10.10.100.103 - 105

Client ： IP 

1、yum 安裝；設(shè)置 yum 源

For EL6 family:

# curl "http://ppa.moosefs.com/MooseFS-3-el6.repo" > /etc/yum.repos.d/MooseFS.repo

MooseFS.repo 需要設(shè)置 gpgcheck=0

2、MFSmaster 管理服務(wù)器

mfsmaster.cfg  主配置文件

默認(rèn)開放 9419 9420 9421 9422 端口；

  配置元數(shù)據(jù)存放位置；

  metadata.mfs 默認(rèn)的元數(shù)據(jù)文件 需要放置到設(shè)置的DATA_PATH目錄；

# cat /etc/mfs/mfsmaster.cfg |grep -v ^$ |grep -v ^#

DATA_PATH = /mfs/data

  mfsexports.cfg 對被掛載目錄及其權(quán)限配置

mfsexports.cfg 對被掛接目錄及其權(quán)限進行設(shè)置

# cat /etc/mfs/mfsexports.cfg |grep -v ^$ |grep -v ^#

*/rw,alldirs,admin,maproot=0:0

*.rw

  Metalogger -- 元數(shù)據(jù)日志服務(wù)器

主配置文件 mfsmetalogger.cfg

  master_host 

# cat /etc/mfs/mfsmetalogger.cfg |grep -v ^$ |grep -v ^#

MASTER_HOST = 10.10.100.101

  配置元數(shù)據(jù)存放位置；

metadata.mfs 默認(rèn)的元數(shù)據(jù)文件 需要放置到設(shè)置的DATA_PATH目錄；

3、數(shù)據(jù)存儲服務(wù)器

# yum install moosefs-chunkserver

  Chunkservers -- 數(shù)據(jù)存儲服務(wù)器 

  主配置文件 mfschunkserver.cfg

master_host 

master_port

# cat /etc/mfs/mfschunkserver.cfg |grep -v ^$ |grep -v ^#

DATA_PATH = /mfs/data

MASTER_HOST = 10.10.100.101

MASTER_PORT = 9420

  mfshdd.cfg 指定服務(wù)器分配給MFS 使用的空間；

  配置MFS 分區(qū) 

/mfsdata

chown -R mfs:mfs /mfsdata

# cat /etc/mfs/mfshdd.cfg |grep -v ^$ |grep -v ^#

/mfs/data

  4、port:

9419 元數(shù)據(jù)日志服務(wù)監(jiān)聽端口

9420 chunk server 數(shù)據(jù)存儲服務(wù)器連接端地址；

9421 客戶端鏈接掛接鏈接端口

9422 chunkserver 服務(wù)器口 

9425 moosefs-cgiserv  監(jiān)控客戶端的鏈接狀態(tài)；

  5、Clients  客戶端掛載 需要 fuse 插件；

# yum install moosefs-client

# yum install fuse

# modprobe fuse （ 加載 fuse 模塊 ）

  fuse 設(shè)置 /etc/fstab

and then add one of the following entries to your /etc/fstab:

"classic" entry (works with all MooseFS 3.0 and 2.0 verisons):

mfsmount                /mnt/mfs    fuse       defaults    0 0

or "NFS-like" entry (works with MooseFS 3.0.75+):

mfsmaster.host.name:    /mnt/mfs    moosefs    defaults    0 0

三、

  客戶端創(chuàng)建掛載點；

mkdir /mnt/mfs

  掛載 MFS

mfsmount /mnt/mfs -H mfsmasterIP 

  ( 有密碼就加個 -p 輸入密碼 ;注意的是 這只是掛載的是同一個元數(shù)據(jù)服務(wù)器IP ;而不是存儲服務(wù)器的iP；）

四、 mfscgiserv 監(jiān)控客戶端鏈接狀態(tài)；查看各項狀態(tài)和服務(wù)。

  http://MFSMASTER:PORT/  默認(rèn)端口 9425 

五、源碼編譯

# useradd mfs -s /sbin/nologin

# wget http://ftp5.gwdg.de/pub/linux/archlinux/extra/os/x86_64//fuse2-2.9.7-3-x86_64.pkg.tar.xz

# wget http://ppa.moosefs.com/src/moosefs-3.0.91-1.tar.gz

  1、管理服務(wù) 元數(shù)據(jù)服務(wù) 存儲服務(wù) 針對不同的服務(wù)起：

mfsmaster

mfschunkserver

mfsmetalogger 

chown -R mfs:mfs /usr/local/mfs

cd /usr/local/mfs

./configure --prefix=/usr/local/mfs --with-default-user=mfs --with-default-group=mfs

make &&make install

  2、MFS 客戶端；

# ./configure --prefix=/usr/local/mfs --with-default-user=mfs --with-default-group=mfs --enable-mfsmount

# make &&make install