【大数据新手上路】“零基础”系列课程--日志服务（Log Service）采集 ECS 日志数据到 MaxCompute-低调大师

【大数据新手上路】“零基础”系列课程--日志服务（Log Service）采集 ECS 日志数据到 MaxCompute

2017-05-14 673

随着公司业务的增多，云服务器 ECS 上的日志数据越来越多，存储开销越来越大，受限于日志的大小和格式，分析的速度非常缓慢，导致海量数据在沉睡，不知道发挥作用，如何能将这些数据进行归集、提炼和智能化的处理始终是一个困扰。通过日志服务投递日志数据到MaxCompute便可以让用户按照不同的场景和需求、以不同的方式复用数据，充分发挥日志数据的价值。

使用日志服务投递日志数据到MaxCompute具有如下优势：

使用非常简单。用户只需要完成2步配置即可以把日志服务Logstore的日志数据迁移到MaxCompute中。
避免重复收集工作。由于日志服务的日志收集过程已经完成不同机器上的日志集中化，无需重复在不同机器上收集一遍日志数据后再导入到MaxCompute。
充分复用日志服务内的日志分类管理工作。用户可让日志服务中不同类型的日志（存在不同Lo

微信关注我们

原文链接：https://yq.aliyun.com/articles/81533

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

WCry还在蔓延，周一上班的几点安全建议

5月12日，WanaCrypt0r 2.0、Onion以及Wallet等后缀的勒索加密事件在全球蔓延。周一在大家打开电脑之前，企业的IT管理员和信息安全管理员务必注意“安全第一”。阿里云安全专家推荐您按照以下几步，进行“周一安全检查”： • 我们发现部分主机疑似被植入了蠕虫，但蠕虫尚未运行。如果您发现系统有任何异常但数据未被加密，强烈建议您使用ECS提供的快照功能立即创建磁盘快照备份； • 微软已于2017年3月份修复了此次三个高危的零日漏洞，建议您立即安装相关补丁（域用户建议通过域控紧急推送微软官方的补丁）； • 安装防病毒软件（推荐MSE），并同时按照第一步打上补丁； • WindowsServer 2003微软官方已经紧急发布针对此次事件的特殊补丁：因此建议您立即安装相关补丁（域用户建议通过域控紧急推送微软官

2017-05-15

622

讲师介绍刘光亚IBM云计算开发架构师 Apache Mesos PMC & Committer OpenStack Magnum Core Member Member - IBM Academy of Technology 西安Mesos & OpenStack Meetup组织者基于Kubernetes的容器云容器云最主要的功能是以应用为中心，帮助用户把所有的应用以容器的形式在分布式里面跑起来，最后把应用以服务的形式呈现给用户。容器云里有两个关键点，一是容器编排，二是资源调度。容器编排就是我们期望能把一些微服务通过容器编排来帮助用户组建一个比较庞大的系统，而资源调度在容器云这种大规模分布式环境是必须的，需要一个比较好的调度平台来提升系统的资源利用率以及根据用户的资源请求帮助用户来调配资源。我们IBM的BlueDock就是这样一个容器云平台，主要基于Kubernetes实现了容器的编排和资源调度，并默认使用Mesos作为底层的资源管理器，但如果用户没有运行多个framework的需求，可不使用Mesos。为什么是Kubernetes和Mesos...

2017-05-15

544

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。