监控和日志-低调大师

监控和日志

2014-05-13 727 89

为什么监控和日志很重要？

监控（Monitoring）和日志（Logging）是大型分布式系统中最关键的基础设施（infrastructure）之一，因为没有监控，就没办法知晓服务的运行情况，就没办法知道集群中有没有Down机，机器的CPU使用率、负载是否正常，网站的Traffic是否正常，服务的出错率是不是在可容忍范围之内。简而言之，监控使得我们可以实时的了解网站的运营情况和可用性（Availability）情况。

监控通常是从整体上了解网站的情况，需要具备实时性。而日志则是详尽的记录着系统运行情况，每一次service的调用，每一次数据库的访问，都应该写进日志，特别是当系统出现问题时，我们希望日志系统能为我们提供完整的错误堆栈（Exception Stack）和尽可能完备的上下文（Context），为系统维护提供支持。日志可以

微信关注我们

转载内容版权归作者及来源网站所有！本站原创内容转载请注明来源！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Spark 0.9.1和Shark 0.9.1分布式安装指南

Spark 0.9.1和Shark 0.9.1分布式安装指南.pdf 目录目录 1 1.约定 1 2.安装Scala 1 2.1.下载 2 2.2.安装 2 2.3.设置环境变量 2 3.安装Spark 2 3.1.部署 2 3.2.下载 3 3.3.安装 3 3.4.配置 3 3.4.1.修改conf/spark-env.sh 3 3.4.2.修改conf/slaves 3 4.启动Spark 3 5.安装Shark 4 5.1.下载 4 5.2.安装 4 5.3.配置 4 5.3.1.修改shark-env.sh 4 6.启动Shark 4 7.执行Shark命令 5 8.常见错误 5 9.相关文档 6 1.约定本文约定Hadoop2.4.0安装在/data/hadoop/current，而Spark0.9.1被安装在/data/hadoop/spark，其中/data/hadoop/spark为指向/data/hadoop/spark。 Spark官网为：http://spark.apache.org/，Shark官网为：http://shark.cs.berkeley.e...

619

写程序很难之logstash之file input插件实现分析

前言写程序有时候真的有点难，要考虑各种情况。应用在运行中，会不断生成日志文件。假如要实现一个日志收集的工具，不考虑其它的分析功能，只考虑收集，有哪些方面要考虑的？首先看下一般的log框架是如何输出日志的：可能是这样的：a.log.1, a.log.2, a.log.3, a.log.4, a.log.5 循环输出；可能是这样的： a.2014-5-5.log, a.2014-5-6.log, a.2014-5-7.log，每天生成一个日志文件；可能是这样的：log.out，每次重启都会生成一个新的log.out，覆盖旧的文件。那么，我们有哪些方面要实现和注意的？提供正则或者globs方式的通配符。要能判断文件是不是新建的。如何判断文件有没有更新？如何保存文件的读取进度？如果我们在读取文件的过程中，文件被删除了会怎样？如果我们在读取文件过程中，进程挂了，读取进度有没有及时保存？在保存文件进度时，如果挂了，重启能不能正确恢复文件进度？能不能保证读取的内容不重复？如果日志文件很快生成，又很快删除了，是否能保证不漏掉？如果日志文件是软链接(soft link)...

896

资源下载

更多资源

Mario，低调大师唯一一个Java游戏作品

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Oracle Database，又名Oracle RDBMS

Oracle Database，又名Oracle RDBMS，或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统，系统可移植性好、使用方便、功能强，适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Java Development Kit(Java开发工具)

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。

Sublime Text 一个代码编辑器

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。