搜索[日志框架]结果-低调大师优秀个人博客

精选列表

搜索[日志框架]，共10000篇文章

基于Flume的日志收集系统方案参考

阅读目录前言方案一方案二补充前言本文将简单介绍两种基于Flume的日志收集系统可能的架构方案，可根据不同的实际场景参考使用。

2017-11-22

ElK分析tomcat的Catalina.out日志

场景：生产环境可集中式分析特定日志，便于管理，以及快速解决程序问题等。常见：nginx、apache的访问日志，错误日志 catalina.out日志等。可以把错误日志提取出并解决。

2017-11-19

ELK之日志查询、收集与分析系统

项目由来（1）开发人员不能登录线上服务器查看详细日志，经过运维周转费时费力（2）日志数据分散在多个系统，难以查找与整合（3）日志数据量巨大，查询速度太慢，无法满足需求（4）无法全局掌控项目运行状况

2017-11-19

多日志文件数据帮你追踪用户

相关数据很重要诊断潜在的安全问题或定位多系统集成中断，需要查看所有相关系统的日志文件，因此需要一致的、相关的数据视图。

2017-11-15

yuminstallepel-release yuminstallaxelvimgitcurlwgetlrzszgccpython-develyum*python-pip 设置docker官方repo，安装docker CE版本 yum-config-manager\ --add-repohttps://download.docker.com/linux/centos/docker-ce.repo yuminstall-ydocker-ce docker-v 配置docker mkdir/etc/systemd/system/docker.service.d tee/etc/systemd/system/docker.service.d/docker.conf<<'EOF' [Service] MountFlags=shared EOF 编辑 /usr/lib/systemd/system/docker.service #ExecStart=/usr/bin/dockerd ExecStart=/usr/bin/dockerd--insecure-registry192.168.10.139:4000 启动docker systemctldaemon-reload systemctlrestartdocker systemctlenabledocker dockerinfo registry服务器 dockerrun-d-v/opt/registry:/var/lib/registry-p5000:5000\ --restart=always--nameregistryregistry:2 监控系统涉及很多软件，很有代表性：Prometheus，grafana，alertmanager，exporters Prometheus https://prometheus.io/docs/prometheus/latest/installation/ dockerrun-p9090:9090-v/tmp/prometheus.yml:/etc/prometheus/prometheus.yml\ prom/prometheus 本文转自yuweibing51CTO博客，原文链接：http://blog.51cto.com/yuweibing/2048204 ，如需转载请自行联系原作者

2017-11-15

使用cygwin从windows上传日志到hdfs

windows操作系统：windows server2003 对cygwin不熟，所幸我只是需要进行很简单的应用，在同事的帮助下完成了这个工作。这里大致说一下，给大家提供一个思路。 1、安装JDK，并配置环境变量。要注意安装路径不要空格，不要安装到类似于program files这种目录，否则cygwin会出问题。 2、部署hadoop。直接拉一个liux上部署的hadoop，并部署到本地。我把它放到了D盘的根目录下。 3、安装cygwin。主要是几个组件，不必细说。我把它安装到了D盘的根目录下。 4、创建windows用户cloud。这里创建的用户，必须与linux里运行hadoop的用户相同，否则在上传文件时会提示没有权限。 5、创建一个供cloud用户调用的bat文件，写入： D:\cygwin\bin\bash--login-iD:/hadoop-0.20.2-CDH3B4/bin/hadoop-ls/ 上述脚本的目的是为了测试使用windows脚本通过cygwin调用hadoop命令是否成功。注意斜杠的不同: 前半部分是windows下的斜杠，后半部分是linux下的斜杠！以cloud用户的身份运行这个脚本后，cygwin会其安装目录下的home文件下创建一个cloud的用户目录！ 6、上述测试通过以后，则在cygwin中的cloud用户目录中创建一个sh文件，比如名为upload.sh的文件，写入： #!/bin/bash D:/hadoop-0.20.2-CDH3B4/bin/hadoopfs-put$DIR/$FILES$HDFS 然后，重新编辑刚才的bat文件，把后面的命令更改为sh脚本名称： D:\cygwin\bin\bash--login-i/home/cloud/upload.sh 7、其它的部分的修改，主要是 hadoop配置文件，一般要把其中的 JAVA环境变量注释掉，或者某些部分的斜杠要改成 windows的习惯，或者要修改windows的hosts表。本文转自 li_qinshan 51CTO博客，原文链接:http://blog.51cto.com/share/665666

2017-11-14

开源实时日志分析ELK平台部署

开源实时日志分析ELK平台部署日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器软硬件信息、检查配置过程中的错误及错误发生的原因。

2017-11-14

MySQL深入08-日志及其参数设定

查询日志 1 2 3 4 log={ON|OFF} # 是否记录所有语句的日志信息于一般查询日志文件（general_log）中； log_output={TABLE | FILE | NONE} #

2017-11-14

分布式日志收集系统Scribe原理

1.分布式日志收集系统:背景介绍许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征：（1）构建应用系统和分析系统的桥梁

2017-11-14

ELK+Kafka 企业日志收集平台(一)

码字很辛苦，转载请注明来自运维人的《ELK+Kafka 企业日志收集平台(一)》背景：最近线上上了ELK，但是只用了一台Redis在中间作为消息队列，以减轻前端es集群的压力，Redis的集群解决方案暂时没有接触过

2017-11-13

hive中打印日志的几种方式实现

在debug hive的问题时，我们经常需要在源码里面增加必要的日志信息，来跟踪变量的变化或者是方法执行的情况，性能等。。hive里面有下面几个日志的实现方式。

2017-11-13

Android开发3——查看和输出日志信息

一、错误级别 Error > Warn > Info > Debug > Verbose(冗余) 二、Android项目日志查看视图 Console视图只能看项目的部署到模拟器上的信息

2017-11-12

ELK实战之logstash收集日志写入redis

123456 OK 192.168.56.12:6379> KEYS * (empty list or set) 192.168.56.12:6379> quit 二、配置logstash将日志写入

2017-11-11

Logstash5.4.1解析日志报错处理

kibana/_settings -d '{ "number_of_replicas" : 0 }' elasticsearch分片不向其他节点分布：集群由2台es组成，但是分片只分布在一台节点，查看日志发现报错

2017-11-11

记录日志系统ELKB 5.6.4的搭建过程

而Filebeat也就这样加入了“日志收集分析”的团队里，所以虽然大家还是习惯性的叫ELK，其实准确的说法已经是ELKB了。

2017-11-11

filebeat 获取nginx日志发送给ElasticSearch

目的：通过filebeat获取nginx日志，发送给ElasticSearch，filebeat可以解析json格式日志，所以设置nginx日志为json格式。

2017-11-11

syslog介绍-CS架构来采集系统日志

syslog是一种标准的协议，分为客户端和服务器端，客户端是产生日志消息的一方，而服务器端负责接收客户端发送来的日志消息，并做出保存到特定的日志文件中或者其他方式的处理。

2017-11-07

分布式日志收集系统scribe介绍

Scribe是facebook开源的日志收集系统，在facebook内部已经得到大量的应用。 Scribe是基于一个使用非阻断C++服务器的thrift服务的实现。

2017-11-07

Android日志系统Logcat源代码简要分析

在前面两篇文章Android日志系统驱动程序Logger源代码分析和Android应用程序框架层和系统运行库层日志系统源代码中，介绍了Android内核空间层、系统运行库层和应用程序框架层日志系统相关的源代码

2017-11-06

容器时代的分布式日志架构

本文讲的是容器时代的分布式日志架构，微服务与宏观问题现代的科技公司强调微服务架构，容器也越来越重要。在需要为多种平台和应用提供服务的世界里，微服务是必不可少的。

2017-10-17

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。

精选列表

基于Flume的日志收集系统方案参考

ElK分析tomcat的Catalina.out日志

ELK之日志查询、收集与分析系统

多日志文件数据帮你追踪用户

docker笔记（转自：陈沙克日志）

使用cygwin从windows上传日志到hdfs

开源实时日志分析ELK平台部署

MySQL深入08-日志及其参数设定

分布式日志收集系统Scribe原理

ELK+Kafka 企业日志收集平台(一)

hive中打印日志的几种方式实现

Android开发3——查看和输出日志信息

ELK实战之logstash收集日志写入redis

Logstash5.4.1解析日志报错处理

记录日志系统ELKB 5.6.4的搭建过程

filebeat 获取nginx日志发送给ElasticSearch

syslog介绍-CS架构来采集系统日志

分布式日志收集系统scribe介绍

Android日志系统Logcat源代码简要分析

容器时代的分布式日志架构

资源下载

Mario

腾讯云软件源

Spring

WebStorm

欢迎您来访！

精选列表

基于Flume的日志收集系统方案参考

ElK分析tomcat的Catalina.out日志

ELK之日志查询、收集与分析系统

多日志文件数据帮你追踪用户

docker笔记（转自：陈沙克日志）

使用cygwin从windows上传日志到hdfs

开源实时日志分析ELK平台部署

MySQL深入08-日志及其参数设定

分布式日志收集系统Scribe原理

ELK+Kafka 企业日志收集平台(一)

hive中打印日志的几种方式实现

Android开发3——查看和输出日志信息

ELK实战之logstash收集日志写入redis

Logstash5.4.1解析日志报错处理

记录日志系统ELKB 5.6.4的搭建过程

filebeat 获取nginx日志 发送给ElasticSearch

syslog介绍-CS架构来采集系统日志

分布式日志收集系统scribe介绍

Android日志系统Logcat源代码简要分析

容器时代的分布式日志架构

资源下载

Mario

腾讯云软件源

Spring

WebStorm

欢迎您来访！

filebeat 获取nginx日志发送给ElasticSearch