Kibana：数据分析的可视化利器-低调大师

Kibana：数据分析的可视化利器

2017-12-13 692

日志数据的可视化利器

阿里云Elastisearch集成了可视化工具Kibana，用户可以使用Kibana查询和分析存储在Elastisearch中的数据。Kibana 搭载了一些经典功能：柱状图、线状图、饼图、环形图，等等，充分利用了 Elasticsearch 的聚合功能。而且Dashboard功能能够将各种可视化组件集合成大屏。如下图所示，Kibana对网站应用的访客日志进行统计分析。

强大而便捷的开发工具

借助Kibana的开发工具，您可以跳过在终端键入的过程直接处理 Elasticsearch 数据。与开源软件相比，Search Profiler 可让您轻松查看搜索请求期间花费的时间。并且在您的Logstash配置中创建复杂的 Grok 模式，使 Grok Debugger 变得轻而易举。下图为Search Profiler

微信关注我们

原文链接：https://yq.aliyun.com/articles/285815

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Hadoop概念

由Apache基金会开发的分布式基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有高容错性的特点，并且设计用来部署在低廉(low-cost)的硬件上；而且他提供高吞吐量来访问应用程序的数据，适合那些有着超大数据集的应用程序。HDFS放宽了POSIX的要求，可以以流的形式访问文件系统中的数据。其框架最核心的设计：HDFS和MapReduce。HDFS为海量的数据提供了存储，MapReduce为海量的数据提供了计算。本文摘自：百度百科！！！！

2017-12-13

547

工作流调度器azkaban（以及各种工作流调度器比对）

1：工作流调度系统的作用：（1）：一个完整的数据分析系统通常都是由大量任务单元组成：比如，shell脚本程序，java程序，mapreduce程序、hive脚本等；（2）：各任务单元之间存在时间先后及前后依赖关系；（3）：为了很好地组织起这样的复杂执行计划，需要一个工作流调度系统来调度执行；（4）：举例说明工作流调度系统的具体作用：我们可能有这样一个需求，某个业务系统每天产生20G原始数据，我们每天都要对其进行处理，处理步骤如下所示：a、通过Hadoop先将原始数据同步到HDFS上；b、借助MapReduce计算框架对原始数据进行转换，生成的数据以分区表的形式存储到多张Hive表中；c、需要对Hive中多个表的数据进行JOIN处理，得到一个明细数据Hive大表；d、将明细数据进行复杂的统计分析，得到结果报表信息；e、需要将统计分析得到的结果数据同步到业务系统中，供业务调用使用。（5）：工作流调度实现方式： a：简单的任务调度：直接使用linux的crontab来定义；b：复杂的任务调度：开发调度平台，或使用现成的开源调度系统，比如ooize、azkaban等（6）：常见工作流...

2017-12-14

636

资源下载

更多资源

Oracle

Oracle Database，又名Oracle RDBMS，或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统，系统可移植性好、使用方便、功能强，适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Eclipse

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

JDK

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。