SLS：海量日志数据管理利器-低调大师

SLS：海量日志数据管理利器

2016-12-24 671

SLS：海量日志数据管理利器

日志是大规模集群管理系统中非常关键的部分，服务器上的各种日志数据（如访问日志、应用日志等）可以帮助我们回答如运维、开发、运营、客服、安全等各种问题，例如：

运维：服务是否正常，流量和QPS是多少；
开发：线上有没有异常和错误发生；
运营：多少账号开通了服务，其中开通失败原因是什么；
客服：系统登录不上了，是客户的问题还是系统的问题；
安全：谁访问了不该访问的数据。

然而要想从日志中获取这些信息，通常需要开发大量脚本和工具，从头到底搭建端对端系统，并且为了保证服务可靠性和稳定性，要做大量维护开发工作。阿里云自主研发的针对日志数据的实时、大规模集中式管理服务SLS（Simple Log Service，简单日志服务），能够提供一个从日志采集、过滤、处理、聚合到在线查询的完整的海量日志处理平台，满足各种类型的日

微信关注我们

原文链接：https://yq.aliyun.com/articles/67158

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

OpenSearch：轻松构建大数据搜索服务

随着互联网数据规模的爆炸式增长，如何从海量的历史、实时数据中快速获取有用信息，变得越来越具有挑战性。搜索是获取信息最高效的途径之一，因此也是各类网站、应用的基础标配功能。开发者想在自己的产品中实现搜索功能一般都是基于某个开源搜索系统（如ElasticSearch、Solr、Sphinx）搭建搜索服务。然而，除了购买主机或托管服务器，从系统熟悉、服务搭建、功能定制，再到服务上线，通常需要耗费较长时间。云搜索是一种结构化数据的搜索托管服务，开发者可将数据上传至云端进行数据处理和索引构建，再通过API使用云搜索服务。它的出现很好地解决了以上问题。OpenSearch（开放搜索服务）是阿里云推出的一套自助式、可定制的云搜索服务，初衷是将阿里巴巴积累近10年的搜索引擎技术平台化、服务化，并开放给广大开发者，降低实现专业搜索产品的门槛，让开发

2016-12-25

650

自从电商开始真实运作的那天，人们便开始关注电商平台上的标准化数据所带来的潜在价值。但要采集和分析这些数据并不是一件容易的事。不同平台上的海量实时数据给数据采集带来了很大挑战，同时数据分析需求的多样性和时效性也急需通用而快速的分析平台支持。阿里云有得天独厚的电商基因，通过阿里内部各类业务需求的历练，其积累了大量的实践经验，特别是在电商平台数据处理方面的沉淀。这使得当我们基于阿里云的云计算服务来处理这些电商平台数据时有一种“回娘家”的感觉。基于阿里云的数据采集数据采集并不仅是获取数据并保存好，更重要的是要保证数据采集的商业价值。数据采集的商业价值基于海量和实时两大点。这也就意味着我们不仅要应对几乎无限增长的数据规模，还要保证很高的时效性。具有电商基因的阿里云的各个产品帮助我们紧紧抓住了商业价值的这两点基础。基于阿里云来解决采集的数据规模不断增长的问题我们在考虑设计一个可以对应无限增长的数据规模的采集服务时会考虑四个方面。可扩展性：CRM系统几乎承担了所有的数据存储和计算的任务。在数据量越来越多以后，系统容纳不下了的情况是不被允许的。要做到无论数据怎么增长，都可以在不改变现有架构的...

2016-12-25

646

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。