ROLAP与大数据-低调大师

ROLAP与大数据

2016-11-30 573 89

OLAP

大数据相关的场景比较多，常见的有：ETL（数据提取、转换、加载）、实时流式（监控报警、风控等）、机器学习（推荐引擎、用户画像等）、非结构化分析（视频、图片、语音、文本等）、海量大数据在线存储（HBase）、搜索及我们本文讲的OLAP。其中OLAP（在线联机分析）在很多企业占住分析类的大部分。按照一般的理论又分为，M-OLAP，R-OLAP，H-OLAP。简单区别就是 M-OLAP是基于多维数组的存储模型，也是最原始的OLAP，但需要对数据进行预处理才能形成多维结构，大数据领域Kylin属于此类；R-OLAP是完全基于关系模型进行存放的，只是它根据分析的需要对模型的结构和组织形式进行了优化，目前MPP（greenplum）及MPP on HDFS(Presto、Impala)及SQL on DAG(Hive、Spark)均

微信关注我们

原文链接：https://yq.aliyun.com/articles/65190

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

2016-12-01 00:00:00

HDFS Archival Storage

一、是什么随着数据的日益增长，很多数据由热变冷，已经不再或者很少使用，而数据的存储需求越来越大，计算需求则相应增长不大。如何解耦这种急剧增长的存储需求和计算需求？HDFS Archival Storage正好能派上用场。 HDFS Archival Storage是Hadoop-2.6.0新增的一个特性，是Hadoop异构存储中的一部分。它实现了数据按照策略分开存储，解耦存储与计算能力，将部分冷数据归档至拥有廉价高密度存储介质但计算能力不强的机器。 Hadoop-2.6.0起增加了几种存储策略，可以规划某些机器为归档服务器，存储冷数据，存储介质为高密度廉价磁盘，某些机器为热数据服务器，存储热数据，存储介质可以为磁盘，也可以是SSD。存储策略包括如下几种： public static final String MEMORY_STORAGE_POLICY_NAME = "LAZY_PERSIST" ; public static final String ALLSSD_STORAGE_POLICY_NAME = "ALL_SSD" ; public static fin...

557

2016-12-01 00:00:00

开源大数据周刊-第32期

阿里云E-MapReduce实践 E-MapReduce 集群环境小记大家在使用E-MapReduce的时候，都想对E-MapReduce的集群环境细节有些了解。这里根据实践，总结一下E-MapReduce集群环境与应用启动与停止，供大家在实际使用中进行参考。资讯阿里巴巴向Apache软件基金会捐赠消息中间件RocketMQ重磅新闻。11 月 28 日，阿里巴巴宣布将开源分布式消息中间件 RocketMQ 捐赠给 Apache 基金会，成为 Apache 孵化项目，孵化成功后 RocketMQ 有望成为国内首个 Apache 基金会的中间件顶级项目，成为全球继 ActiveMQ、Kafka 之后，分布式消息引擎家族中的新成员。 2017年大数据发展十大新趋势2017年大数据发展的10大趋势经由全球专业机构发布，希望可以为你所在机构的年

681

资源下载

更多资源

优质分享Android(本站安卓app)

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Apache Tomcat7、8、9（Java Web服务器）

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

Sublime Text 一个代码编辑器

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。