初创企业的选择——MaxCompute
前不久刚加入了一家初创公司,公司立足于已有数据资产,计划全力打造自有数据平台。对于刚起步的初创企业,节省的一分钟,无疑都能提高企业在众多竞争对手中的存活率。而自建大数据计算平台对于一个初创团队无论实在时间,人手,技术上无疑是难以实现的,而团队应该专注于业务逻辑的开发。上云成了创业团队踏入大数据大门的唯一选择。 在选择产品之前,我们先对自己的需求进行了梳理。 首先,日常的业务数据需要存储在关系型数据库中,用以保证事务的一致性。然后,需要在业务数据的基础上,周期性计算指标值,周期一般为日、周、每月。此外,为了实现数字化营销,还需要做大量的数据分析和部分数据挖掘。通过预估发现,业务数据中将有超过3张以上的核心表数据量达到千万以上,当需要进行指标计算时,无法在关系型数据库中完成关联查询。为了得到结果,必须选择另外一种数据计算和存储方式来完成清洗转换以及逻辑处理。同时要满足从关系型数据库到数据仓库的快速数据同步。 经过多番对比选择,发现阿里的MaxCompute是一个具有良好生态,以及周边服务套件的大数据开发平台。从数据的采集,清洗到数据的处理,数据挖掘,数据的应用展现,数据流转的生命周期...