监控和日志
为什么监控和日志很重要?
监控(Monitoring)和日志(Logging)是大型分布式系统中最关键的基础设施(infrastructure)之一,因为没有监控,就没办法知晓服务的运行情况,就没办法知道集群中有没有Down机,机器的CPU使用率、负载是否正常,网站的Traffic是否正常,服务的出错率是不是在可容忍范围之内。 简而言之,监控使得我们可以实时的了解网站的运营情况和可用性(Availability)情况。
监控通常是从整体上了解网站的情况,需要具备实时性。而日志则是详尽的记录着系统运行情况,每一次service的调用,每一次数据库的访问,都应该写进日志,特别是当系统出现问题时,我们希望日志系统能为我们提供完整的错误堆栈(Exception Stack) 和尽可能完备的上下文(Context),为系统维护提供支持。日志可以

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
Spark 0.9.1和Shark 0.9.1分布式安装指南
Spark 0.9.1和Shark 0.9.1分布式安装指南.pdf 目录 目录 1 1.约定 1 2.安装Scala 1 2.1.下载 2 2.2.安装 2 2.3.设置环境变量 2 3.安装Spark 2 3.1.部署 2 3.2.下载 3 3.3.安装 3 3.4.配置 3 3.4.1.修改conf/spark-env.sh 3 3.4.2.修改conf/slaves 3 4.启动Spark 3 5.安装Shark 4 5.1.下载 4 5.2.安装 4 5.3.配置 4 5.3.1.修改shark-env.sh 4 6.启动Shark 4 7.执行Shark命令 5 8.常见错误 5 9.相关文档 6 1.约定 本文约定Hadoop2.4.0安装在/data/hadoop/current,而Spark0.9.1被安装在/data/hadoop/spark,其中/data/hadoop/spark为指向/data/hadoop/spark。 Spark官网为:http://spark.apache.org/,Shark官网为:http://shark.cs.berkeley.e...
- 下一篇
写程序很难之logstash之file input插件实现分析
前言 写程序有时候真的有点难,要考虑各种情况。 应用在运行中,会不断生成日志文件。假如要实现一个日志收集的工具,不考虑其它的分析功能,只考虑收集,有哪些方面要考虑的? 首先看下一般的log框架是如何输出日志的: 可能是这样的:a.log.1, a.log.2, a.log.3, a.log.4, a.log.5 循环输出; 可能是这样的: a.2014-5-5.log, a.2014-5-6.log, a.2014-5-7.log,每天生成一个日志文件; 可能是这样的:log.out,每次重启都会生成一个新的log.out,覆盖旧的文件。 那么,我们有哪些方面要实现和注意的? 提供正则或者globs方式的通配符。 要能判断文件是不是新建的。 如何判断文件有没有更新? 如何保存文件的读取进度? 如果我们在读取文件的过程中,文件被删除了会怎样? 如果我们在读取文件过程中,进程挂了,读取进度有没有及时保存? 在保存文件进度时,如果挂了,重启能不能正确恢复文件进度? 能不能保证读取的内容不重复? 如果日志文件很快生成,又很快删除了,是否能保证不漏掉? 如果日志文件是软链接(soft link)...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS7安装Docker,走上虚拟化容器引擎之路
- SpringBoot2整合Thymeleaf,官方推荐html解决方案
- CentOS7设置SWAP分区,小内存服务器的救世主
- Hadoop3单机部署,实现最简伪集群
- CentOS8安装Docker,最新的服务器搭配容器使用
- CentOS8安装MyCat,轻松搞定数据库的读写分离、垂直分库、水平分库
- CentOS7编译安装Gcc9.2.0,解决mysql等软件编译问题
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- CentOS7,8上快速安装Gitea,搭建Git服务器
- CentOS7编译安装Cmake3.16.3,解决mysql等软件编译问题