Dremio与Drill的对比
1.简述
2.区别
a).数据源支持
使用最新版本Dremio 3.3.1和Drill 1.16.0
Dremio3.1.3版本开始不支持HBase,将来会开源社区版HBase连接器
b).自定义功能扩展
- Dremio无自定义功能开发API
- Drill有自定义功能开发API: 开发SQL自定义聚合函数,但该功能处于实验阶段
3.性能对比
a).Dremio聚合查询性能
- 明细数据79457153条,聚合结果510002条
- 原始数据聚合查询3分41秒,使用数据反射聚合查询小于1s
- CPU消耗:原始数据聚合时间长使用低,数据反射聚合时间短使用高
图1 Dremio聚合查询数据量及耗时
图2 Dremio聚合查询CPU使用
b).Drill聚合查询性能
- 明细数据39634975条,聚合结果500000条
- 原始数据聚合查询3分6秒
图3 Drill聚合查询
4.Dremio未开源部分
Dremio主要未开源部分如下:
a).数据安全
- 用户、组和角色的管理
- 数据源的共享
- 虚拟数据源之上的行、列级权限控制
- 个人访问令牌(PAT)
b).Wire Encryption(线加密)
- 全线加密
- ODBC / JDBC客户端加密
- 集群内加密
- 仅Web服务器加密(开源)
c).REST API
- 工作负载管理API
- 用户和令牌相关API
- 检索所有数据反射和根据摘要检索数据反射
- 仅根据Id检索数据反射、创建、修改和删除检索数据反射(开源)
d).单点登陆(SSO)
e).LDAP身份验证(轻型目录访问协议)
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
MaxCompute开发者夏季颁奖礼~久久感谢有你
逗号感谢句号因为它成了句子句号感谢引号因为它突出了感情引号感谢冒号因为它加深了表达冒号感谢破折号因为它延伸了友谊破折号感谢省略号因为它代表了无限感谢 天空感谢白云的点缀回报以蔚蓝花儿感谢雨露的滋润回报以娇艳树感谢阳光的普照回报以参天 欢迎加入“MaxCompute开发者社区2群”,点击链接申请加入或扫描二维码https://h5.dingtalk.com/invite-page/index.html?bizSource=____source____&corpId=dingb682fb31ec15e09f35c2f4657eb6378f&inviterUid=E3F28CD2308408A8&encodeDeptId=0054DC2B53AFE745
- 下一篇
阿里巴巴飞天大数据架构体系与Hadoop生态系统
很多人问阿里的飞天大数据平台、云梯2、MaxCompute、实时计算到底是什么,和自建Hadoop平台有什么区别。 先说Hadoop 什么是Hadoop?Hadoop是一个开源、高可靠、可扩展的分布式大数据计算框架系统,主要用来解决海量数据的存储、分析、分布式资源调度等。Hadoop最大的优点就是能够提供并行计算,充分利用集群的威力进行高速运算和存储。 Hadoop的核心有两大板块:HDFS和MapReduce。 HDFS全称Hadoop Distributed File System,是一种分布式文件存储系统。分布式文件系统是指将固定于某个地点的某个文件系统,扩展到任意多个文件系统,众多的节点组成一个文件系统网络。每个节点可以分布在不同的地点,通过网络进行节点间的通信和数据传输。人们在使用分布式文件系统时,无需关心数据是存储在哪个节点上
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS6,CentOS7官方镜像安装Oracle11G
- Red5直播服务器,属于Java语言的直播服务器
- Hadoop3单机部署,实现最简伪集群
- CentOS7,CentOS8安装Elasticsearch6.8.6
- CentOS7安装Docker,走上虚拟化容器引擎之路
- CentOS7编译安装Gcc9.2.0,解决mysql等软件编译问题
- Windows10,CentOS7,CentOS8安装MongoDB4.0.16
- CentOS7编译安装Cmake3.16.3,解决mysql等软件编译问题
- SpringBoot2整合Redis,开启缓存,提高访问速度
- CentOS6,7,8上安装Nginx,支持https2.0的开启