dba+ 开源工具:面向开发的 MongoDB 图形可视化监控
云栖号资讯:【点击查看更多行业资讯】
在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来!
简介
一款面向研发人员查看的 MongoDB 图形可视化监控工具,借鉴了 Percona PMM Grafana 以及官方自带的 mongostat 工具输出的监控指标项,去掉了一些不必要、看不懂的监控项。目前采集了数据库连接数、QPS/TPS、内存使用率统计,副本集 replset 状态信息和同步复制延迟时长。
采用远程连接方式进去获取数据,所以不需要在数据库服务器端部署相关 agent 或计划任务,可实现微信和邮件报警。
注:监控环境为 MongoDB 3.2 以上版本,2.X 版本未测试。
Mongo 状态监控,点击图表,可以查看历史曲线图:
1、连接数
2、QPS 图表
环境搭建
1、php-mysql 驱动安装:
shell> yum install -y php-pear php-devel php gcc openssl openssl-devel cyrus-sasl cyrus-sasl-devel httpd mysql php-mysql
2、php-mongo 驱动安装:
shell> pecl install mongo
把 extension=mongo.so 加入到 /etc/php.ini 最后一行
重启 httpd 服务,service httpd restart
注:如果通过 pecl 安装报错,请参考以下链接,进行源码安装。PHP 5.4 版本对应的驱动版本是 mongodb-1.3.4.tgz
参考链接: https://www.runoob.com/mongodb/mongodb-install-php-driver.html
3、创建 MongoDB 超级用户权限(监控采集数据时使用):
首先我们在被监控的数据库端创建授权帐号,允许采集器服务器能连接到 MongoDB 数据库。由于需要执行命令 db.runCommand({serverStatus:1,repl:1}).repl 和 db.adminCommand( { replSetGetStatus: 1 } ).members,所以需要授予 root 角色,授权方式如下所示:
> use admin >db.createUser({user:"admin",pwd:"123456",roles:[{role:"root",db:"admin"}]})
mongo_monitor 部署
把 https://github.com/hcymysql/mongo_monitor/archive/master.zip 安装包解压缩到 /var/www/html/ 目录下:
cd /var/www/html/mongo_monitor/
chmod 755 ./mail/sendEmail
chmod 755 ./weixin/wechat.py
注:邮件和微信报警调用的第三方工具,所以这里要赋予可执行权限 755。
1、导入 Mongo Monitor 监控工具表结构(mongo_monitor 库):
cd /var/www/html/mongo_monitor/
mysql -uroot -p123456 < mongo_monitor_schema.sql
2、录入被监控主机的信息:
INSERT INTO `mongo_status_info` (ip,tag,USER,pwd,PORT,authdb,send_mail_to_list,send_weixin_to_list,threshold_alarm_connection,threshold_alarm_repl) VALUES('10.10.159.31','MongoDB 测试机 1','admin','hechunyang','27017','admin','hechunyang','hechunyang@126.com',1000,60);
注,以下字段可以按照需求变更:
ip 字段含义:输入被监控 Mongo 的 IP 地址
tag 字段含义:输入被监控 Mongo 的业务名字
user 字段含义:输入被监控 Mongo 的用户名(ROOT 权限)
pwd 字段含义:输入被监控 Mongo 的密码
port 字段含义:输入被监控 MySQL 的端口号
authdb 字段含义:输入被监控 Mongo 的数据库登录权限认证库名
monitor 字段含义:0 为关闭监控(也不采集数据,直接跳过);1 为开启监控(采集数据)
send_mail 字段含义:0 为关闭邮件报警 ;1 为开启邮件报警
send_mail_to_list 字段含义:邮件人列表
send_weixin 字段含义:0 为关闭微信报警 ;1 为开启微信报警
send_weixin_to_list 字段含义:微信公众号
threshold_alarm_connection 字段含义:设置连接数阀值(单位个)
threshold_alarm_repl 字段含义:设置主从复制延迟阀值(单位秒)
3、修改 conn.php 配置文件:
vim /var/www/html/mongo_monitor/conn.php
$con = mysqli_connect(“127.0.0.1”,“admin”,“hechunyang”,“mongo_monitor”,“3306”) or die(“数据库链接错误”.mysql_error());
改成你的 Mongo Monitor 监控工具表结构(mongo_monitor 库)连接信息。
4、修改邮件报警信息:
cd /var/www/html/mongo_monitor/mail/
vim mail.php
system("./mail/sendEmail -f chunyang_he@139.com -t ‘{$this->send_mail_to_list}’ -s smtp.139.com:25 -u ‘{$this->alarm_subject}’ -o message-charset=utf8 -o message-content-type=html -m '报警信息:
{$this->alarm_info}’ -xu chunyang_he@139.com -xp ‘123456’ -o tls=no");
改成你的发件人地址、账号密码,里面的变量不用修改。
5、修改微信报警信息:
cd /var/www/html/mongo_monitor/weixin/
vim wechat.py
微信企业号设置移步 https://github.com/X-Mars/Zabbix-Alert-WeChat/blob/master/README.md 看此教程配置。
6、定时任务每分钟抓取一次:
crontab -l
*/1 * * * * cd /var/www/html/mongo_monitor; /usr/bin/php /var/www/html/mongo_monitor/check_mongo_status.php > /dev/null 2 >&1 */1 * * * * cd /var/www/html/mongo_monitor; /usr/bin/php /var/www/html/mongo_monitor/check_mongo_repl.php > /dev/null 2 >&1
check_mongo_status.php(用来采集被监控端 Mongo 状态信息和触发报警)
check_mongo_repl.php(用来采集被监控端 Mongo 主从复制信息和触发报警)
7、更改页面自动刷新频率:
vim mongo_replset_monitor.php
http-equiv="refresh" content="600"
默认页面每 600 秒自动刷新一次。
8、页面访问:
http://yourIP/mongo_monitor/mongo_replset_monitor.php
加一个超链接,可方便地接入你们的自动化运维平台里。
下载方式
此工具现通过 dbaplus 社群免费为大家提供下载使用。若使用过程中有任何问题或建议,可随时与我们联系,欢迎大家试用。
登录以下链接即可下载
:
https://github.com/hcymysql/mongo_monitor
更多开源工具 & 脚本
详情及下载: http://dbaplus.cn/list-142-1.html
工具下载:
https://github.com/hcymysql/mongo_monitor
作者介绍:
贺春旸,凡普金科爱钱进 DBA 团队负责人,《MySQL 管理之道:性能调优、高可用与监控》第一、二版作者,曾任职于中国移动飞信、安卓机锋网。致力于 MariaDB、MongoDB 等开源技术的研究,主要负责数据库性能调优、监控和架构设计。
【云栖号在线课堂】每天都有产品技术专家分享!
课程地址:https://yqh.aliyun.com/zhibo立即加入社群,与专家面对面,及时了解课程最新动态!
【云栖号在线课堂 社群】https://c.tb.cn/F3.Z8gvnK
原文发布时间:2020-05-22
本文作者:dbaplus社群
本文来自:“InfoQ”,了解相关信息可以关注“InfoQ”
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
从通用到专用,5G时代IP核的新故事
云栖号资讯:【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来! 如同芯片在不断迭代,IP核也在不断进步。集成电路技术60年来基本遵循摩尔定律的演进规律。随着进入后摩尔时代,即两年一代技术更换的节奏开始放缓,设计和制造企业开始更加重视产品的多样化发展,而不再一味追求特征尺寸的缩小,使得IP核技术发展也出现新的趋势,5G的到来将加速这一趋势的凸显。 5G的新需求 此前,新思科技(Synopsys)总裁兼联席首席执行官陈志宽博士曾公开表示,不同于4G或者以前的移动网络,5G的高速度、高带宽和高频率,这些特性将会给半导体行业带来明显的转变。 相比于4G,5G的业务场景扩大,业务需求发生重大变化。5G具有大带宽、低延时、广联接的特性,这为整个行业带来了颠覆性的新应用机会。 对于5G手机来说,5G显著地提高了手机的数据吞吐量,导致业内对于高效处理解决方案、支持高速芯片到芯片通信的接口IP等解决方案的需求也急剧提升。 同样,在汽车领域,5G的商用为LTE-V2X提供了更强大的性能和更多的可能性,5G形成了端到端的生态系统,也产生了大量数据,使人们开始更多的思考安全...
- 下一篇
一个导致JVM物理内存消耗大的Bug
本文来自: PerfMa技术社区 PerfMa(笨马网络)官网 概述 最近我们公司在帮一个客户查一个JVM的问题(JDK1.8.0_191-b12),发现一个系统老是被OS Kill掉,是内存泄露导致的。在查的过程中,阴差阳错地发现了JVM另外的一个Bug。这个Bug可能会导致大量物理内存被使用,我们已经反馈给了社区,并得到快速反馈,预计在OpenJDK8最新版中发布(JDK11中也存在这个问题)。 PS:用户的那个问题最终也解决了,定位下来算是C2的一个设计缺陷导致大量内存被使用,安全性上没有得到保障。 找出消耗大内存的线程 接下来主要分享下这个BUG的发现过程,先要客户实时跟踪进程的情况,当内存使用明显上升的时候,通过/proc/<pid>/smaps,看到了不少64MB的内存分配,Rss也基本消耗完了。 7fd690000000-7fd693f23000 rw-p 00000000 00:00 0 Size: 64652 kB Rss: 64652 kB Pss: 64652 kB Shared_Clean: 0 kB Shared_Dirty: 0 kB Priva...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS关闭SELinux安全模块
- SpringBoot2编写第一个Controller,响应你的http请求并返回结果
- Mario游戏-低调大师作品
- CentOS6,CentOS7官方镜像安装Oracle11G
- SpringBoot2配置默认Tomcat设置,开启更多高级功能
- Windows10,CentOS7,CentOS8安装Nodejs环境
- Docker安装Oracle12C,快速搭建Oracle学习环境
- Windows10,CentOS7,CentOS8安装MongoDB4.0.16
- CentOS8编译安装MySQL8.0.19
- MySQL8.0.19开启GTID主从同步CentOS8