【监控】ganglia 安装部署-低调大师

【监控】ganglia 安装部署

2012-02-12 869

Ganglia 是 UC Berkeley 发起的一个开源监视项目，设计用于测量数以千计的节点。每台计算机都运行一个收集和发送度量数据（如处理器速度、内存使用量等）的名为 gmond 的守护进程。它将从操作系统和指定主机中收集。接收所有度量数据的主机可以显示这些数据并且可以将这些数据的精简表单传递到层次结构中。正因为有这种层次结构模式，才使得 Ganglia 可以实现良好的扩展。gmond 带来的系统负载非常少，这使得它成为在集群中各台计算机上运行的一段代码，而不会影响用户性能。

ganglia的架构为层次架构，安装的过程主要是主节点和从节点的安装

1 ganglia 主节点上安装步骤

1.1 安装php和apache 默认是安装的！

[root@rac1 ~]#yum install httpd php

1.2 安装必要的库，

[root@rac1 ~]#yum -y install apr-devel apr-util check-devel cairo-devel pango-devel libxml2-devel glib2-devel dbus-devel freetype-devel fontconfig-devel gcc-c++ expat-devel python--devel libXrender-devel zlib libpng freetype libjpeg fontconfig gd libxml2 pcre pcre-devel

[root@rac1 ~]#yum -y install libconfuse libconfuse-devel.x86_64 # 安装confuse库

[root@rac1 ~]#yum install rrdtool

1.3 安装rrdtiool库

[root@rac1 ~]# wget http://oss.oetiker.ch/rrdtool/pub/rrdtool.tar.gz

[root@rac1 ~]# tar zxvf rrdtool.tar.gz

[root@rac1 ~]# cd rrdtool-1.4.5

[root@rac1 ~]# ./configure --prefix=/usr &&　make -j8 && make install

[root@rac1 ~]# which rrdtool

[root@rac1 ~]# ldconfig

1.4 开始正式安装ganglia

[root@rac1 ~]# wget http://cdnetworks-kr-1.dl.sourceforge.net/project/ganglia/ganglia%20monitoring%20core/3.1.7/ganglia-3.1.7.tar.gz

[root@rac1 ~]# tar zxvf ganglia-3.1.7.tar.gz

[root@rac1 ~]# cd ganglia-3.1.7

[root@rac1 ~]# ./configure --with-gmetad --sysconfdir=/etc/ganglia && make -j8 && make install # 在主节点上需要编译安装gmetad进程，这个是和从节点安装的主要不同点

[root@rac1 ~]# cp -rp ./web /var/www/html/ganglia

[root@rac1 ~]# cp ./gmetad/gmetad.init /etc/init.d/gmetad

[root@rac1 ~]# cp ./gmond/gmond.init /etc/init.d/gmond

[root@rac1 ~]# gmond -t |tee /etc/ganglia/gmond.conf # generate initial gmond config

1.5 为rrds创建存放图片文件的目录以及进行配置

[root@rac1 ~]# mkdir -p /u01/ganglia/rrds

[root@rac1 ~]# chown -R nobody:nobody /u01/ganglia

[root@rac1 ~]# vi /var/www/html/ganglia/conf.php# 修改以下内容，指定rrds存放位置

# Where gmetad stores the rrd archives.

$gmetad_root = "/u01/ganglia";

$rrds = "$gmetad_root/rrds";

1.6 对gmond gmetad 以及apache进行配置

[root@rac1 ~]# vi /etc/ganglia/gmetad.conf # 修改将data source后面的字符串换成你的集群名字，例如my cluster 将rrd_rootdir "/u01/ganglia/rrds"加入最后一行

[root@rac1 ~]# vi /etc/ganglia/gmond.conf # 修改将cluster中的name后换成你的集群名字，例如my cluster，记得一定要和gmetad.conf中data source的集群名字一样，

# 另外，为了将ganglia监控集群的传播消息方式由广播改为单博，需要注释掉和默认的广播地址239.2.11.71相关的所有行，将host=主节点ip或是主机名加入udp_send_channel所在的配置组中。对于单播和多播的区别，建议查看ganglia的手册

vi /etc/httpd/conf.d/php.conf# 去掉最后一行的井号，使得apache可以解析php脚本

1.7 启动gmond gmetad 以及apache

[root@rac1 ~]# /etc/init.d/gmetad start #start service

[root@rac1 ~]# /etc/init.d/gmond start

service httpd start

[root@rac1 ~]# 主节点上这三个进程成功启动后，可以使用浏览器通过：主机的ip/ganglia 这样URL来访问，会发现集群中有一个主机被监控

ganglia 2 从节点上安装步骤

在主机点上，使用pgm远程操作rac[2-3]三台机器，在这三台机器上安装gmond进程，来作为从进程

ganglia 2.1 安装依赖的库

pgmscp -A rac[2-3] ganglia-3.1.7.tar.gz /home/hadoop

pgm rac[2-3] "yum -y install apr-devel apr-util check-devel cairo-devel pango-devel libxml2-devel glib2-devel dbus-devel freetype-devel fontconfig-devel gcc-c++ expat-devel python-devel libXrender-devel zlib libpng freetype libjpeg fontconfig gd libxml2 pcre pcre-devel"

pgm rac[2-3] "yum -y install libconfuse libconfuse-devel.x86_64 -b test"

ganglia 2.2 配置安装ganglia

pgmscp rac[2-3] ganglia-3.1.7.tar.gz /home/hadoop

pgm rac[2-3] "tar zxvf ganglia-3.1.7.tar.gz"

pgm rac[2-3] "cd ganglia-3.1.7 && ./configure --sysconfdir=/etc/ganglia && make -j8 && make install"

pgm rac[2-3] "cd ganglia-3.1.7 && cp gmond/gmond.init /etc/init.d/gmond "

pgmscp -A rac[2-3] /etc/ganglia/gmond.conf /home/hadoop

pgm rac[2-3] "cp /home/hadoop/gmond.conf /etc/ganglia/" # 将本机的gmond.conf复制到远程的ganglia配置目录下,其实也可以采用gmond -t |tee /etc/ganglia/gmond.conf来生成配置文件的,但是,还是需要再配置成和主节点上一样的,不如直接将主节点上的复制过来,一步到位:)

ganglia 2.3启动从节点上的gmond进程

pgm rac[2-3] "/etc/init.d/gmond start" # 从节点上gmond进程成功启动后，可以使用浏览器通过：主机的ip/ganglia 这样URL来访问，会发现集群中多了三个被监控的主机!

结果截图：

1.JPG

2.JPG

3.JPG

微信关注我们

原文链接：https://yq.aliyun.com/articles/282493

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

【HBase】start master 与 start master --backup 的区别

我们都知道hbase 集群中通常有一个master 节点,多个region server节点,为了防止HBase 集群中master的单点故障,可以向集群中添加一个slave master,这些新添加的master 会分布在不同的物理机器上,因此以最坏的情形来看,当前运行master的那台物理机down了,整个系统可以由backup的 master 来接管！在介绍如何添加master 节点之前，我们先了解一下在hbase集群中master是如何产生的.master 进程使用Zookeeper 来判断哪一个是当前活动的master:所有的master 竞争创建Zookeeper 中有一个专用的znode,第一个成功创建znode的成为集群中的当前活动的master ！以上场景会发生在整个集群启动时,如果存在多个master 进程同时启动,则成功创建znode的成为集群中的master。所有其他未成功的节点则simply loop around the znode并且等待master创建的znode消失,并触发重新竞争。下面的是来自《HBase: The Definitive Gu...

2012-02-01

716

本文系统地介绍和分析比较了业界主流的Yahoo! S4、StreamBase和Borealis三种流式计算系统，希望读者能从这些系统的设计中领悟到不同场景下流式计算所要解决的关键问题。背景非实时计算几乎都基于MapReduce计算框架，但MapReduce并不是万能的。对于搜索应用环境中的某些现实问题，MapReduce并不能很好地解决问题。商用搜索引擎，像Google、Bing和Yahoo!等，通常在用户查询响应中提供结构化的Web结果，同时也插入基于流量的点击付费模式的文本广告。为了在页面上最佳位置展现最相关的广告，通过一些算法来动态估算给定上下文中一个广告被点击的可能性。上下文可能包括用户偏好、地理位置、历史查询、历史点击等信息。一个主搜索引擎可能每秒钟处理成千上万次查询，每个页面都可能会包含多个广告。为了及时处理用户反馈，需要一个低延迟、可扩展、高可靠的处理引擎。然而，对于这些实时性要求很高的应用，尽管MapReduce作了实时性改进，但仍很难稳定地满足应用需求。因为Hadoop为批处理作了高度优化，MapReduce系统典型地通过调度批量任务来操作静态数据；而流式计算的...

2012-02-14

700

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。