企业的存储设备已为数据驱动型经济做好了准备吗?
组织需要重新考虑其存储架构,以实现数据驱动型经济。组织如何捕获、存储和分析数据的方式可以决定在这种新的经济模式中数据驱动组织的成功程度。
数据驱动的经济不仅限于使用人工智能(AI)和深度学习(DL)做出更好的决策。尽管这些应用无疑至关重要,但其他关键驱动因素还包括5G的可用性,这提高了移动性并创建了新的边缘/核心关系以及用于培训和获利。数据驱动型经济的用例包括自动驾驶汽车、互联城市、个性化医疗、定制媒体和娱乐、新的金融模式和市场,以及“一切皆服务”现象。
数据驱动的经济要求新的存储和数据管理架构。这些体系结构需要超越仅提供分布式容量的传统横向扩展存储解决方案。数据驱动型经济的存储体系结构需要利用横向扩展来分发所有数据管理服务,例如元数据存储、数据索引和搜索以及安全性和分析处理。另外,支持数据驱动型经济的存储基础设施不会位于单个位置或数据中心。它的分布式特性需要一个全局全局名称空间,该名称空间可以从任何地方存储和访问数据和应用程序。
来自传感器和设备等来源的非结构化数据是数据驱动型经济的基础。与过去几年不同,该数据是大小文件的混合。文件的数量可以达到数十亿个,并且它们可能消耗数PB的容量。支持数据驱动型经济的存储基础设施需要为深度学习工作负载提供图形处理单元(GPU)计算场。这些用例需要能够支持大量非结构化数据的存储基础设施。在许多情况下,组织只能捕获一次数据,因此数据需要长期保留并需要保证数据不会更改。
对存储基础架构的要求组合似乎相互矛盾。例如,自动驾驶汽车超越了二级自主性,就意味着每年每辆汽车产生超过2PB的数据。这些容量要求意味着,用于数据驱动型经济的存储基础设施不能只是一个全闪存阵列。闪存和硬盘驱动器之间的成本差异仍然很高。数据驱动型经济的存储基础设施很有可能在其核心具有横向扩展、高度并行、基于硬盘的存储系统,在边缘计算具有高速闪存。
数据驱动型经济的存储基础设施看起来与高性能计算基础架构相似,因为它需要提供高带宽和高度并行的输入和输出(IO),但还需要以经济高效的方式存储PB级数据。
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
Σco时间 | 大数据存算是“分”还是“合”?华为给你正确答案!
【51CTO.com原创稿件】华为企业业务中国 4天前虽然因“疫情”的影响,让技术人群放弃了聚会,减少了面对面沟通,但他们对于学习和交流的渴望从未停歇过。为此华为特别推出了#Σco时间#系列栏目,以线上直播+互动的形式,共话技术变革与行业转型。 3月4日下午3点,本期#Σco时间#聚焦的话题是“大数据存算是‘分’还是‘合’,您做对了吗?”——华为智能数据与存储分布式存储高级营销专家崔玉祥来到了华为“智能数据基础设施「学数派」”直播间,分享了华为如何看待存算分离的价值,以及华为大数据的存算分离解决方案和应用实践,并与上千位线上嘉宾探讨了存算分离技术的发展趋势和市场前景。 数字经济时代,大数据架构走向存算分离 崔玉祥介绍道,在数字经济时代,数据已经成为新的生产资料,并从数据管理走向数据运营,大数据正发挥着越来越重要的作用,数据驱动体验、数据驱动决策、数据驱动流程的各种应用每天都在不断上演。随着5G和AI技术的发展,数据量必将迎来爆发式的增长,在这样的形势下,传统的大数据存算一体架构,在多个行业都面临着资源利用率不均、存储成本高、资源共享难的挑战。 以国内电信运营商为例,每年市场采购金额高达...
- 下一篇
TiDB在360的落地及实战干货
TiDB在360的落地及实战干货 背景 Part1:写在最前 当一张百亿数据量的表放在你面前,你将面临着什么? 加列?哭吧,怎么也得等个几天甚至几周。加索引?哭吧,不论你用pt-online-schema,还是gh-ost,你都面临着拷贝一张临时表用以存储临时数据,磁盘已经80%了,你这一张表就占几百G,你咋弄?~ 我先说几个最让你兴奋和开心的点吧: 在TiDB里,你完全不用担心磁盘容量的问题; 在TiDB里,原生支持Online DDL,你完全不用担心第三方改表工具改表出现各种Bug的问题,相信用开源工具改过上T级别表的同学都遇到过或多或少的各类error。 在TiDB里,加列,主键扩容字段都是秒级的,比如我刚刚就刚对一张19亿的表加完了字段,1s完事儿~这在MySQL里要8.0才可以,而且还要求列在最后才行。 在TiDB里,你会发现count(*)惊人的快,一张近20亿的表coun(*)大概在1分钟完事儿,当然,这取决于你的KV数量和磁盘性能。 在TiDB里,从MySQL迁移将变得简单,图形化一件迁移,爽不爽? 在TiDB里,......,您且往下看,我慢慢和您说~ Part2...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS8编译安装MySQL8.0.19
- CentOS8,CentOS7,CentOS6编译安装Redis5.0.7
- SpringBoot2整合MyBatis,连接MySql数据库做增删改查操作
- SpringBoot2整合Redis,开启缓存,提高访问速度
- SpringBoot2配置默认Tomcat设置,开启更多高级功能
- Hadoop3单机部署,实现最简伪集群
- CentOS7,CentOS8安装Elasticsearch6.8.6
- CentOS6,7,8上安装Nginx,支持https2.0的开启
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- SpringBoot2编写第一个Controller,响应你的http请求并返回结果