MaxCompute 入门必知
一、什么是MaxCompute?
大数据计算服务(MaxCompute,原名ODPS)是一种快速、完全托管的EB级数据仓库解决方案。
随着数据收集手段不断丰富,行业数据大量积累,数据规模已增长到了传统软件行业无法承载的海量数据(百TB、PB、EB)级别。MaxCompute致力于批量结构化数据的存储和计算,提供海量数据仓库的解决方案及分析建模服务。
由于单台服务器的处理能力有限,海量数据的分析需要分布式的计算模型。分布式的计算模型对数据分析人员要求较高且不易维护。数据分析人员不仅需要了解业务需求,同时还需要熟悉底层分布式计算模型。MaxCompute为您提供完善的数据导入方案以及多种经典的分布式计算模型,您可以不必关心分布式计算和维护细节,便可轻松完成大数据分析。
二、概述与产品特点
1、采用分布式架构,规模可以根据需要平行扩展
2、自动存储容错机制,保障数据高可靠性
3、所有计算在沙箱中运行,保障数据高安全性
4、以 RESTful API 的方式提供服务
5、支持高并发、高吞吐量的数据上传下载
6、提供离线计算、机器学习两类模型及计算服务
7、支持基于 SQL、MapReduce、Graph、MPI 等多种编程模型的数据处理方式
8、支持多租户,多个用户可以协同分析数据
9、支持基于 ACL 和 Policy 的用户权限管理,可以配置灵活的数据访问控制策略,防止数据越权访问
三、主要应用场景
日志分析、机器学习、数据仓库、数据挖掘、用户画像、数据化运营、商业智能等,例如:
四、MaxCompute 系统架构
五、MaxCompute 作业流程

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
第六代超分型宿主机发布
信息摘要: 第六代超分型宿主机发布,支持自定义超分比,自定义实例规格,为企业客户提供更自主可控的云上部署方式。适用客户: 1. 使用传统虚拟化的企业迁移上云,保有原有资源管理习惯,如:VMware、OpenStack、Hyper-V、KVM等; 制造、零售等行业的提供高性价比上云方案; 金融、保险行业客户的安全隔离上云方案; 互联网行业开发测试环境上云方案,降低云上成本。版本/规格功能: 1. 第六代超分型宿主机支持创建自定义的ECS实例规格,用户可以自主选择实例的vCPU数和内存大小,如:2C6G,6C8G等 支持用户自主调节CPU超分比例,支持最高8倍的物理CPU超分,针对不同CPU负载的业务可选择最优的性价比,优化云上TCO。产品文档: 中国站:https://help.aliyun.com/document_detail/68564.html国际站:https://www.alibabacloud.com/help/doc-detail/68564.html
- 下一篇
有人要在「动物森友会」上开AI学术会议,我看你们就是在家想玩游戏吧
云栖号资讯:【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来! 《动物森友会》这个游戏,任天堂400块钱卖给你们真是亏大了。 本来是一款社交养成类游戏,被大家玩成了cosplay现实世界。有人在上面演起了著名小品“卖拐”,李云迪甚至还在上面举办了音乐演奏会。 然而这些都还没有把动森玩到极致。 可能是受到近期网络举办学术会议的启发,有位博士要组织一场动森AI研讨会(Animal Crossing AI workshop)。 由于今年是第一届,所以简称ACAI 2020,和CVPR、ICLR这些学术顶会的名字一比,是不是有内味了? 或许是怕东半球最强法务部的律师函警告,大会的海报被尽量做得不太像动森,“狸克”、“傅达”都没有出现,但主人公张开的手臂、圆圆的小手还是出卖了他。 计划举办ACAI的是佛罗里达国际大学计算机系的博士Joshua D. Eisenberg。 Joshua说这只是一个实验,目的是了解体验在动森中开研讨会的感觉,希望为AI研究人员营造一个有意义的互动空间,并分享他们的工作。 你还别说,ACAI大会虽然是线上,但还真办得有那么回事。 参...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS8安装Docker,最新的服务器搭配容器使用
- MySQL8.0.19开启GTID主从同步CentOS8
- SpringBoot2整合MyBatis,连接MySql数据库做增删改查操作
- CentOS7编译安装Gcc9.2.0,解决mysql等软件编译问题
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- 设置Eclipse缩进为4个空格,增强代码规范
- SpringBoot2全家桶,快速入门学习开发网站教程
- CentOS7,CentOS8安装Elasticsearch6.8.6
- Windows10,CentOS7,CentOS8安装MongoDB4.0.16
- CentOS7设置SWAP分区,小内存服务器的救世主