像用“数据库”一样使用“大数据”!华为宣布河图引擎开源
11 月 19 日,华为在深圳举办了 2019 全球数据基础设施论坛。华为 Cloud & AI 产品与服务总裁侯金龙宣布,面向鲲鹏计算产业,全面启动数据基础设施战略,并开源数据虚拟化引擎 HetuEngine(河图引擎),希望让伙伴像使用“数据库”一样使用“大数据”,让数据治理、使用更简单。
今年 9 月,华为在全联接大会上发布了“一云两翼双引擎”的鲲鹏计算产业布局,基于“鲲鹏+�N腾”双引擎,全面启航计算战略,为世界提供最强算力。今天华为又从数据角度对计算战略再一次进行了阐述。
侯金龙表示,华为公司的愿景与使命是:“把数字世界带入每个人、每个家庭、每个组织,构建万物互联的智能世界”。在智能世界,算力成为新生产力,数据成为新生产资料,“5G、AI、云”成为新生产工具,将使能千行百业迈入智能时代。
随着 5G、AI 和云的普及,数据量正以惊人的速度增长:从 1080P 到 4K、8K,视频数据量将提升 40 倍,从 4K 到 4K VR 要增加 6 倍以上;未来每辆自动驾驶汽车每天就会产生高达 64 TB 数据;深圳一个城市有超过 200 万摄像头,每天将产生 80 PB 数据,平均保存 30 天,大家希望保存更长时间;大量的数据过去只需存几天,现在需要保存几个月甚至永久保存。
根据预测,全球数据量将从 2018 年的 33 ZB 快速增长到 2025 年的 180 ZB。但是,产生的数据中仅有不到2% 被保存,而被保存的数据中仅有不到 10% 被应用。
这些海量数据的增长背后是需要海量存储和计算的资源,数据增长是无限的,而存储资源却是有限的。
华为希望,对数据的采、存、算、管、用实施端到端的整合和优化,让数据在全生命周期内更好用,数据的每比特发挥价值最大,数据的每比特成本最优。
为实现这个追求,华为打造融合、智能、开放的数据基础设施,让数据系统从孤立走向融合,从复杂走向智能,从封闭走向开放:
- 通过“打破数据处理与数据存储的边界”,实现数据高效共享和分析,降本增效。
- 通过“AI+ 存储+云”,实现数据全生命周期内智能管理和智能运营,让存储越用越快,价值越来越大。
- 通过“数据虚拟化引擎”,统一 SQL 语法,像使用数据库一样使用大数据。
通过 10 余年技术积累和创新,华为在存储、数据库和大数据技术上实现了一系列突破,通过打破 4 堵墙,让数据的每比特发挥价值最大,数据的每比特成本最优。
- 打破存储内部系统墙:通过一套架构实现生产、分析、备份、归档的统一管理,一份数据在各个系统中平滑流动,减少拷贝,TCO 降低 30% 以上。
- 打破数据库与存储链路墙:通过算子下推实现近数据计算,减少存储层与计算层之间的数据交换,数据访问和处理性能提升 2 倍。
- 打破大数据与存储配置墙:通过存算分离实现资源灵活配置,计算不足扩计算,存储不足扩存储 。并通过弹性 EC、数据缩减技术减少冗余,整体 TCO 降低 30% 以上。
- 打破数据库与大数据协同墙:通过协同分析实现数据零搬迁,数据库和大数据共享一份数据,分析效率提升 100%。
此外,针对目前大量业务需要跨平台、跨数据源协同分析,找数难、取数难、用数难等痛点,为了屏蔽数据类型差异、地域差异、语法差异,让数据治理简单,使用简单,华为推出了“河图引擎”。
同时,为了更好地发展数据产业,今天侯金龙宣布开源河图引擎,开源版本的河图引擎叫 openHetu,将于 2020 年 6 月上线。
华为将开源内核,开发者可以基于开源代码进行定制,包括数据源扩展、SQL 执行策略等,实现应用快速对接,提升开发效率。
侯金龙最后表示,华为始终践行“平台+生态”策略,通过硬件开放,软件开源,使能伙伴,共建开放、繁荣的鲲鹏计算产业生态,共同迈入智能时代。
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
Dev 日志 | 一次 Segmentation Fault 和 GCC Illegal Instruction 编译问题排查
摘要 笔者最近在重新整理和编译 Nebula Graph 的第三方依赖,选出两个比较有意思的问题给大家分享一下。 Flex Segmentation Fault——Segmentation fault (core dumped) 在编译 Flex 过程中,遇到了 Segmentation fault: make[2]: Entering directory '/home/dutor/flex-2.6.4/src' ./stage1flex -o stage1scan.c ./scan.l make[2]: *** [Makefile:1696: stage1scan.c] Segmentation fault (core dumped) 使用 gdb 查看 coredump: Core was generated by `./stage1flex -o stage1scan.c ./scan.l'. Program terminated with signal SIGSEGV, Segmentation fault. #0 flexinit (argc=4, argv=0x7ffd25...
- 下一篇
携号转网:你,转网了吗?
“我觉得要不是迫于压力,这几家运营商压根儿就不想做携号转网,这门槛太也多了。”一位尝试携号转网的用户摇头叹气道。 他告诉懂懂笔记,自己在查询转网资格时,才发现名下号码居然绑定了如此多的业务和套餐。如今,这些“套餐”成了转网的拦路虎,如果他想完成转网,可能要坚持活过2099年。 的确,近日和不少手机用户交流时,可以看到他们的转网回复短信中,都存在着各种各样的难题,有些服务动辄“2025、2030”甚至更久。 那么,这转网到底是让转还是不让转呢? 免费赠送服务的时机太微妙 “查询转网资格之前,我也看到不少新闻提到有太多门槛。” 家住广州的钟先生一直打算更换运营商。由于过去更换运营商无法更换手机号码,加上他的手机号码是自家店铺唯一的联系方式,因此就作罢了。但是一周前听说三大运营商可以携号转网,他顿感十分兴奋。在查看网上相关流程之后,他开始发送短信查询资格,“当时觉得蛮简单的,就是发个短信而已。” 然而,当看到运营商发回的短信时,钟先生顿时傻了眼。他告诉懂懂笔记,回复信息表示他的号码暂时无携号转网的资格,并且罗列了无法携号转网的六大原因,“除了网上说的服务套餐、宽带未到期,家庭短号、集团短号未...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- CentOS7,CentOS8安装Elasticsearch6.8.6
- CentOS6,CentOS7官方镜像安装Oracle11G
- CentOS7编译安装Cmake3.16.3,解决mysql等软件编译问题
- SpringBoot2编写第一个Controller,响应你的http请求并返回结果
- CentOS8编译安装MySQL8.0.19
- SpringBoot2配置默认Tomcat设置,开启更多高级功能
- Windows10,CentOS7,CentOS8安装Nodejs环境
- Docker快速安装Oracle11G,搭建oracle11g学习环境
- CentOS8,CentOS7,CentOS6编译安装Redis5.0.7