“数据湖”:概念、特征、架构与案例
写在前面:
最近,数据湖的概念非常热,许多前线的同学都在讨论数据湖应该怎么建?阿里云有没有成熟的数据湖解决方案?阿里云的数据湖解决方案到底有没有实际落地的案例?怎么理解数据湖?数据湖和大数据平台有什么不同?头部的云计算玩家都各自推出了什么样的数据湖解决方案?带着这些问题,我们尝试写了这样一篇文章,希望能抛砖引玉,引起大家一些思考和共鸣。感谢南靖同学为本文编写了5.1节的案例,感谢西壁的review。
本文包括七个小节:1、什么是数据湖;2、数据湖的基本特征;3、数据湖基本架构;4、各厂商的数据湖解决方案;5、典型的数据湖应用场景;6、数据湖建设的基本过程;7、总结。受限于个人水平,谬误在所难免,欢迎同学们一起探讨,批评指正,不吝赐教。
一、什么是数据湖
数据湖是目前比较热的一个概念,许多企业都在构建或者计划构建自己的数据湖。但是在计划构建
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
去福州,靠脸生活
云栖号资讯:【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来! 福州人民很快就可以靠“脸”行走江湖了。 在地铁站,刷脸就可以进站; 在图书馆,刷脸就可以借书; 在医院或政务服务中心,刷脸就可以取号; …… 甚至上课点名、上班考勤都用的是人脸识别。 从今夏到明年,这些功能正在陆续上线中。 注意,这些不同场景背后,连接的是同一套系统。 在福州市政府的官方智慧城市应用e福州手机App上录入人脸信息,完成各项设置之后,就可以凭借一张脸出行。 目前,刷脸乘地铁的功能已经开始测试,8月份全面上线。 上线之后,如果你去福州旅游、出差,就可以体会到: 刷脸通行,不再仅局限于某个单位、某栋写字楼、某个园区,而是来到福州这片土地上的所有人,都可以共享、共用这一套系统。 这听起来就有几分科幻感。 千万人同刷脸,到底有多难? 《银河系漫游指南》的作者道格拉斯·亚当斯,用一套“科技三定律”来吐槽人们对于科技的认知: 1)任何在我出生时已经有的科技都是稀松平常的世界本来秩序的一部分。 2)任何在我15-35岁之间诞生的科技都是将会改变世界的革命性产物。 3)任何在我35岁之后诞...
- 下一篇
iOS快手面经(已拿offer)
背景 过完年来北京之后,有准备看看机会,也是想了解下市场行情。简历没有投太多,只定向投了头条教育部门、抖音、快手、阿里,这些公司。 头条和阿里的简历都没过,肯定是亮点太少吧。只有快手简历过了,快手是三轮技术面+一轮HR面,前两轮技术都比较顺利,到第三轮却栽了,很痛心o(╥﹏╥)o。目前就不考虑换工作了,等下半年再说了,接下来的时间再好好精炼一下。 快手是视频面试,不支持周末,但是可以选择晚上时间,我这几次都是定在了晚上九点。视频面试是通过牛客网进行的,以下是我还记得下来的各轮面试题,对于一些iOS基础知识就不做解答了。 一面 1、用递归写一个算法,计算从1到100的和。 func sum(value: Int) -> Int { if value <= 0 { return 0 } var number = value return value + sum(value: number - 1) } // 计算过程 let result = sum(value: 100) print(result) 作为一个开发者,有一个学习的氛围跟一个交流圈子特别重要,这是一个我的iOS交...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS8,CentOS7,CentOS6编译安装Redis5.0.7
- CentOS8安装MyCat,轻松搞定数据库的读写分离、垂直分库、水平分库
- CentOS7安装Docker,走上虚拟化容器引擎之路
- Jdk安装(Linux,MacOS,Windows),包含三大操作系统的最全安装
- CentOS关闭SELinux安全模块
- CentOS6,7,8上安装Nginx,支持https2.0的开启
- Mario游戏-低调大师作品
- CentOS7设置SWAP分区,小内存服务器的救世主
- SpringBoot2配置默认Tomcat设置,开启更多高级功能
- CentOS7编译安装Gcc9.2.0,解决mysql等软件编译问题