Moosefs存储空间扩容及元数据恢复

本文主要关于Moosefs存储空间扩容及元数据恢复说明,Moosefs安装配置参考以下链接

http://hnr520.blog.51cto.com/4484939/1837619


一、原有集群,一台master、一台metalogger、两台chunkserver

1.分布情况

IP地址

角色

系统

备注

192.168.115.12

mfsmaster

Centos7

node2.hnr.com

192.168.115.31

mfsmetalogger

Centos6


192.168.115.11

mfschunkserver

Centos7

node1.hnr.com

192.168.115.13

mfschunkserver

Centos7

node3.hnr.com

192.168.115.11

mfsclient

Centos7

node1.hnr.com

2.挂载使用并设置副本数为2

#/usr/local/mfs/bin/mfsmount -H 192.168.115.12 /mnt/test/
#/usr/local/mfs/bin/mfssetgoal -r 2 /mnt/test/

3.准备数据

复制5150M文件到mfs上

#for i in {1..5};do cp server.log /mnt/test/server.log.$i;done

4.磁盘空间使用情况

chunkserver1

wKiom1eu-IjS49mrAAA47x_vM3M139.jpg

chunkserver2

wKioL1eu-Jayj5jGAAAkGFf6gfQ585.jpg

5.查看这个5个文件的副本数

#for i in `ls /mnt/test/`;do /usr/local/mfs/bin/mfsfileinfo /mnt/test/$i;done

wKiom1eu-KmxtaaHAAIlgjV0H5c675.jpg

 

二、增加chunkserver节点,扩容存储空间

1.新加入chunkserver节点

IP地址

角色

系统

备注

192.168.115.12

mfschunkserver

Centos7


192.168.115.31

mfschunkserver

Centos6


2.软件安装好,修改连接master地址即可,启动服务即可加入集群中

加入两个chunkserver节点,可以看到数据进行重新平衡,每个chunk复制一份到新加的两个节点其中一个,待相应的chunk都复制到新加的节点,在删除一个原有的chunk

wKiom1eu-N6AzJ5XAAI78hIy-dc405.jpg

3.重新平衡后的效果

wKioL1eu-SiyXN45AAIzNY8JcPg996.jpg

三、元数据损坏恢复

1.什么是元数据损坏

元数据损坏是指由于各种原因导致master上的metadata.mfs数据文件不可用。

一旦元数据损坏,所有的存储在moosefs上的文件都不可使用。

2.模拟元数据损坏

停止master节点并删除metadata.mfschangelog.0.mfs(变更日志文件)。

# /usr/local/mfs/sbin/mfsmasterstop
# cd/usr/local/mfs/lib/mfs
# rm -rf *

重新启动master将报错

#/usr/local/mfs/sbin/mfsmaster start

wKiom1eu-TqReO6sAADnmN8uZhI848.jpg

3.Master元数据恢复

metalogger上将最新一份metadata_ml.mfs.backchangelog_ml.0.mfs复制到master的数据目录下,并注意文件属主属组为mfs

# scp changelog_ml.0.mfs metadata_ml.mfs.back192.168.115.12:/usr/local/mfs/lib/mfs

master节点数据目录修改复制过来的文件属性

# chown mfs.mfs *

启动master服务

wKioL1eu-VfzBzZhAADwAw4Pv8A678.jpg

此时需要以-a方式启动

# /usr/local/mfs/sbin/mfsmaster -a

wKioL1eu-Wai_LFVAAImWnkoxDI432.jpg

到此,master服务已经正常启动

4.验证文件是否可用

wKiom1eu-Y2znCLYAADb9WK2lEY519.jpg

wKioL1eu-ZuCNySyAADb4JbL0sc725.jpg

经过验证,存储上的原有文件均正常。


优秀的个人博客,低调大师

微信关注我们

原文链接:https://blog.51cto.com/hnr520/1837629

转载内容版权归作者及来源网站所有!

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

相关文章

发表评论

资源下载

更多资源
优质分享Android(本站安卓app)

优质分享Android(本站安卓app)

近一个月的开发和优化,本站点的第一个app全新上线。该app采用极致压缩,本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario,低调大师唯一一个Java游戏作品

Mario,低调大师唯一一个Java游戏作品

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

Apache Tomcat7、8、9(Java Web服务器)

Apache Tomcat7、8、9(Java Web服务器)

Tomcat是Apache 软件基金会(Apache Software Foundation)的Jakarta 项目中的一个核心项目,由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定,而且免费,因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可,成为目前比较流行的Web 应用服务器。

Java Development Kit(Java开发工具)

Java Development Kit(Java开发工具)

JDK是 Java 语言的软件开发工具包,主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心,它包含了JAVA的运行环境(JVM+Java系统类库)和JAVA工具。