基于hadoop的免费大数据平台有哪些?
早些时候(5月28号)由社科文献出版社初版的《大数据蓝皮书:中国大数据发展报告No.2》正式发布了。以“数化万物 智在融合”为主题的中国国际大数据产业博览会也京举行中。基本可以预见,在接下来的一段时期内关于大数据应用开发又将进入到一个新的阶段。
现在市面上围绕大数据的应用开发如火如荼,比如,企业级大数据处理平台开发、政务大数据平台的开发、智慧交通大数据平台开发等。这些大数据处理平台的开发从技术角度上来说都是偏向于底层的,开发难度之大真不是三两个人就可以搞得定的。虽然个人独立开发难度大,但研究下这些平台架构总是可以的,可能对于从事开发方面的技术宅来说,势必是要去研究下的!从我自己身边的这些技术宅身上,这一点我是看的很透彻的。
我接触大数据的时间其实不是很久,也就是从去年开始接触的,算是我这个小圈子里比较早倒腾大数据方面东西的人之一吧。前几天有人问是否有免费的大数据平台可以玩一下。默默回了他,免费的没有,付费的倒是一大把!
免费的也不能说是没有,如果仅仅是作为个人爱好研究一下倒是可以找来一些免费版本的玩一下的,当然作为企业或者一些大平台应用的,自然是需要花大价钱购买更为专业的版本的。那些付费版本的这里我们就不讨论了,对于个人想要研究一下大数据相关内容的,到时候可以去玩一下大快搜索的DKhadoop,我印象中是有好几个版本的,有独立的免费版的可以去大快搜索的网站上去申请下载的。DKhadoop免费版本的没有安装过的,我用的是大快的其他版本的。可能是习惯了吧,所以觉得还是很好用的。
其实提供免费版试用版本的不是只有大快搜索了,很多做大数据hadoop开发的一般都会提供一些“乞丐版”。但各家提供的这些免费试用版也是存在很大差异的,虽然大家遵循的开发原则一致,但还是各人有各人的特色吧。其他版本的我没怎么用过,也不好说太多。感兴趣的可以自己再去查找一些!

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
HBase生产环境配置与使用优化不完全指南
HBase上线至今,承载了线上所有实时交易量,虽然大部分请求都能够保证服务稳定(99.56%响应时间毫秒级),但是一旦HBase出现问题就是鸡飞狗跳的灾难。 从老机器到新集群,从老机房到新机房,期间经历过各种问题和生产故障,总结一番以备不时之需。 HBase使用定位:大规模数据+高并发+毫秒级响应的OLTP实时系统(数据库)。 集群部署架构 HBase集群一旦部署使用,再想对其作出调整需要付出惨痛代价,所以如何部署HBase集群是使用的第一个关键步骤。 以下是HBase集群使用以来的部署架构变化以及对应的分析。 第一阶段 硬件混合型+软件混合型集群 集群规模:20 部署服务:HBase、Spark、Hive、Impala、Kafka、Zookeeper、Flume、HDFS、Yarn等 硬件情况:内存、CPU、磁盘等参差不齐,有高配有低配,混搭结构 硬件混合型指的是该集群机器配置参差不齐,混搭结构。 软件混合型指的是该集群部署了一套CDH全家桶套餐。 这个集群不管是规模、还是服务部署方式相信都是很多都有公司的”标准“配置。 那么这样的集群有什么问题呢? 如果仅仅HBase是一个非“线上...
- 下一篇
阿里巴巴大数据运维平台实践
作者介绍:矮鱼,2012年开始从事互联网,现负责阿里大数据计算服务保障和平台研发,在运维领域内有丰富经验积累。秉承 "Service unavailable? Our problem, whatever the reason"的理念,致力于保证线上稳定性和推进团队平台产品的迭代演进。 MaxCompute是阿里巴巴内部唯一的大数据处理平台,且在全球十几个地区提供公有云服务,并为上百家专有云输出计算能力。 作为支撑如此庞大系统的SRE团队,要面对的是EB级数据,TB级带宽,上百万块硬盘,还有上万的客户发工单。 我们在全流程的发布管理,全球的配置同步,高效的监控感知等基础运维领域都实现了高度的自动化。同时,从底层硬件到上层应用各个环节,我们掌握并分析使用了大量的数据来帮助我们突破传统思路的局限。 本次聚焦于近期在平台落地的几项成果,多地域的容
相关文章
文章评论
共有0条评论来说两句吧...