首页 文章 精选 留言 我的

精选列表

搜索[node],共10006篇文章
优秀的个人博客,低调大师

hadoop cluster decommission node (下线节点,超级实用)

一、描述 为了节约成本,避免资源浪费,下线集群中的一个节点,也就是把一台云主机回收喽。 centos 6.6_64bit hadoop 2.6.0 二、操作步骤(动态下线) 下线节点主机名如下,在hadoop用户下操作,配置文件都在conf目录下 host-10-10-10-10 ##一看就在云上是不是 1.在conf目录下创建文件 touchexcludes echo "host-10-10-10-10" > exclude less exclude ##要有验证 2.修改配置文件hdfs-site.conf vi hdfs-site.xml 添加如下内容,路径根据自己的实际情况 <property> <name>dfs.hosts.exclude</name> <value>/usr/local/RoilandGroup/hadoop-2.6.0/etc/hadoop/excludes</value> </property> 3.修改配置文件 yarn-site.conf 添加如下内容,路径根据自己的实际情况 <property> <name>yarn.resourcemanager.nodes.exclude-path</name> <value>/usr/local/RoilandGroup/hadoop-2.6.0/etc/hadoop/excludes</value> </property> 4.刷新hdfs节点(namenode active操作) hdfs dfsadmin -refreshNodes hdfs dfsadmin -report ##观察节点是否decommission 5.刷新nodemanager节点(resourcemanager active操作) yarn rmadmin -refreshNodes 6.修改slave文件 注释掉主机名 #host-10-10-10-10 7.同步exclude文件和slave文件 scp exclude 到namenode/resourcemanager 的 standby节点 8.再次验证,确保是我们想要的结果,通知运维同事可以回收云主机。 三、注意事项 1.生产环境操作之前一定要做好测试 2.查看官方文档,要知道自己修改的文件对系统有多大影响,做到心里有数。 本文转自 roidba 51CTO博客,原文链接:http://blog.51cto.com/roidba/1922803,如需转载请自行联系原作者

资源下载

更多资源
Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

腾讯云软件源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题,腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构,目前腾讯云软件源站支持公网访问和内网访问。

Sublime Text

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能,例如代码缩略图,Python的插件,代码段等。还可自定义键绑定,菜单和工具栏。Sublime Text 的主要功能包括:拼写检查,书签,完整的 Python API , Goto 功能,即时项目切换,多选择,多窗口等等。Sublime Text 是一个跨平台的编辑器,同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源,继承了IntelliJ IDEA强大的JS部分的功能。

用户登录
用户注册