“帮助企业做好MaxCompute成本优化的实践” 主题分享 6月21日 18:30不见不散
计算的价值绝不止计算本身,而是让本不会说话的数据发声。阿里云大数据计算服务MaxCompute以技术驱动产品,历经10年沉淀,成功支持阿里集团几乎99%的数据存储以及95%的计算,成为历年双11背后的核武器;更为众多企业提供快速、完全托管的从GB到EB级的数据仓库解决方案,助力企业经济高效的分析处理海量数据,实现数据和业务的更大价值。
MaxCompute作为强劲的新一代计算引擎,具备超大规模存储,多种计算模式,强安全,低成本的众多优势,连续三年在世界级sort benchmark和bigbench中表现出卓越水平,用实力证明“中国计算,世界能力”。
在这个初夏,MaxCompute与大数据开发者们共同开启“因计算,共成长”分享季。
第一季《MaxCompute开发实战,爽爽不油腻》四次主题分享
“MaxCompute开发者交流钉钉群”不
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
ELK入门使用-与springboot集成
前言 ELK官方的中文文档写的已经挺好了,为啥还要记录本文?因为我发现,我如果不写下来,过几天就忘记了,而再次捡起来必然还要经历资料查找筛选测试的过程。虽然这个过程很有意义,但并不总是有那么多时间去做。因此,接下来的内容仅仅是我根据查询到的资料,筛选,组装,测试后达到我的目标的一个过程。 什么是ELK K我最初还以为是Kafka,事实上,ELK平台是一个完整的日志分析解决方案,由这三个开源工具构建而成:Elasticsearch、Logstash、Kibana。 Elasticsearch用于深度搜索和数据分析,它是基于Apache Lucene的分布式开源搜索引擎,无须预先定义数据结构就能动态地对数据进行索引; Logstash用于日志集中管理,包括从多台服务器上传输和转发日志,并对日志进行丰富和解析,是一个数据管道,提供了大量插件来支持数据的输入和输出处理; 最后是Kibana,提供了强大而美观的数据可视化,Kibana完全使用HTML和Javascript编写,它利用Elasticsearch 的RESTful API来实现其强大的搜索能力,将结果显示位各种震撼的图形提供给最终的...
- 下一篇
饿了么大数据计算引擎实践与应用
饿了么BDI-大数据平台研发团队目前共有20人左右,主要负责离线&实时Infra和平台工具开发。其中6人的离线团队需要维护大数据集群规模如下: Hadoop集群规模1300+ HDFS存量数据40+PB,Read 3.5 PB+/天,Write 500TB+/天 14W MR Job/天,10W Spark Job/天,25W Presto/天 此外还需要维护Hadoop、Spark、Hive、Presto等组件饿了么内部版本,解决公司400+大数据集群用户每天面临的各种问题。 本文主要介绍饿了么大数据团队如何通过对计算引擎入口的统一,降低用户接入门槛。如何让用户自助分析任务异常及失败原因,以及如何从集群产生的任务数据本身监控集群计算/存储资源消耗,监控集群状况,监控异常任务等。 引擎入口统一 目前在饿了么对外提供的查询引擎主要有Pre
相关文章
文章评论
共有0条评论来说两句吧...