首页 文章 精选 留言 我的
优秀的个人博客,低调大师

微信关注我们

原文链接:https://yq.aliyun.com/articles/205204

转载内容版权归作者及来源网站所有!

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

大数据爆发性增长 存储技术面临难题

随着大数据应用的爆发性增长,大数据已经衍生出了自己独特的架构,而且也直接推动了存储、网络以及计算技术的发展。毕竟处理大数据这种特殊的需求是一个新的挑战。硬件的发展最终还是由软件需求推动的。大数据本身意味着非常多需要使用标准存储技术来处理的数据。大数据可能由TB级(或者甚至PB级)信息组成,既包括结构化数据(数据库、日志、SQL等)以及非结构化数据(社交媒体帖子、传感器、多媒体数据)。此外,大部分这些数据缺乏索引或者其他组织结构,可能由很多不同文件类型组成。从目前技术发展的情况来看,大数据存储技术的发展正面临着以下几个难题: 1、容量问题 这里所说的“大容量”通常可达到PB级的数据规模,因此,海量数据存储系统也一定要有相应等级的扩展能力。与此同时,存储系统的扩展一定要简便,可以通过增加模块或磁盘柜来增加容量,甚至不需要停机。 “大数据”应用除了数据规模巨大之外,还意味着拥有庞大的文件数量。因此如何管理文件系统层累积的元数据是一个难题,处理不当的话会影响到系统的扩展能力和性能,而传统的NAS系统就存在这一瓶颈。所幸的是,基于对象的存储架构就不存在这个问题,它可以在一个系统中管理十亿级别的文...

国家广电总局借助领先的存储技术释放海量数据的价值

ZDNet至顶网服务器频道 09月16日 新闻消息:国家广电总局监管中心肩负着对全国电视节目、互联网等信息网络视听节目、新媒体视听节目播出内容以及全国无线广播节目的监听监看的重任,监听监看任务涉及业务系统数目较多,数据量大,数据统一管理困难,如何整合这些业务系统实现数据存储、管理、共享一直都是监管行业的技术难题。如何破局,不仅关系着解决广电总局大数据存储管理的困扰,更将势必会引起广电行业新的技术革命。 如今这一难题已经被浪潮海量存储解决方案化解。广电总局监管中心的海量数据实现了“放得下”和“取得出”。 “放得下”和“取得出” 国家广播电影电视总局监管中心,拥有广播电视监测中心、收听收看中心、安全播出调度中心、信息网络视听节目监管中心和中视卫星公司5个单位,同时下设全国15个广播监测台,是我国宣传事业的“千里眼、顺风耳”。全国电视节目、互联网等信息网络视听节目、新媒体视听节目播出内容以及全国无线广播节目,全靠其监听监看。 随着机构的整合,卫星电视、网络视听节目和新媒体业务的不断发展,所需的存储系统规模巨大。 大容量是对存储的第一要求,“放得下”是最基本的。 以 IPTV播控平台为例,向下...

相关文章

发表评论

资源下载

更多资源
优质分享App

优质分享App

近一个月的开发和优化,本站点的第一个app全新上线。该app采用极致压缩,本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

腾讯云软件源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题,腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构,目前腾讯云软件源站支持公网访问和内网访问。

Sublime Text

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能,例如代码缩略图,Python的插件,代码段等。还可自定义键绑定,菜单和工具栏。Sublime Text 的主要功能包括:拼写检查,书签,完整的 Python API , Goto 功能,即时项目切换,多选择,多窗口等等。Sublime Text 是一个跨平台的编辑器,同时支持Windows、Linux、Mac OS X等操作系统。