大数据系列之大数据分析对IT资源的需求-低调大师

大数据系列之大数据分析对IT资源的需求

2017-08-31 611

文章讲的是 大数据系列之大数据分析对IT资源的需求，　为了准确描述中国大数据市场和技术发展趋势，解析大数据发展的各阶段对IT技术的需求，2013年6月，中桥调研咨询(以下简称中桥)对中国480家最终用户的IT管理者和专业人员，就大数据市场和技术发展趋势展开了调查。中桥首席分析师王丛结合其在欧美数据中心领域十几年的市场调研积累，对中国大数据市场趋势的调查数据进行解析，以诠释中国大数据市场和技术趋势。同时，会通过在线讲座(www.webinars-china.com )和中国读者解读中国大数据市场趋势，以及大数据对IT技术、IT架构、IT管理以及IT格局的影响。中桥结合对中国大数据市场的调研数据和分析，将分成四个系列对“中国大数据价值和趋势”进行解读。

　　在系列1里，中桥就大数据分析对未来24个月以及企业的大数据分析投入重点进行分析。在系列2 里，中桥将就大数据分析对IT资源的需求，包括IT架构、计算节点以及存储技术等进行分析。

　　大数据分析对IT架构的需求

　　在大数据时代，随着数据存储量的爆炸性增长以及分层网络架构的出现，IT复杂性达到了前所未有的高度，而大数据分析使得传统IT架构更是不堪重负。那么从企业角度来看，他们的大数据环境需要怎样的IT架构呢?中桥调查结果表明(图1)，企业级用户(员工人数在1000人以上)主要选择的是“透明、经济、智能、自动化”的IT架构(29.3%)，中小企业(员工人数在1000人以下)则主要选择的是一体机方案(服务器、存储、网络、大数据分析软件)(28.9%)。企业级用户倾向于开放、异构、跨平台的IT架构，因为其用于大数据分析的IT架构发展较为成熟，如何继续提高BI效率是企业级用户选择IT架构的重点。中小企业尚处于IT架构发展初期，因此一体机的方案成为中小企业的首选。受访者的选择结果也体现了中国企业未来对IT架构的需求趋势，说明数据整合和ETL是中国企业的迫切需求，也是目前面临的最大问题之一。

　　图1. 大数据环境对IT架构的需求

　　大数据分析对计算技术的需求

　　再从大数据分析的计算方式来看(图2)，21.6%和21.3%的企业级用户分别考虑x86虚拟化和小型机来部署大数据分析方案，中小企业(23.8%)则主要考虑刀片服务器的计算方式。刀片服务器的高密度特点有利于提高计算能力、保持高IT密度。企业级的应用多数运行在小型机的平台上，这造成如果大数据分析是在现有基础上实现，则小型机就成为了企业级的首选;如果要选择在一个全新平台实现大数据分析，那么X86虚拟化就成为了企业级用户的第一选择。结合我们之前所分析的，目前中国市场的大数据分析速度和频率远低于欧美市场，这导致中国企业在数据分析，这个大数据通过IT创造价值，这一重要环节上比较薄弱。

▲图2.大数据分析对计算技术的需求

　　大数据分析对存储的需求

　　从大数据分析的第一个环节——数据收集和存储来看，大数据时代应用数量、应用数据量和使用者数量的增长，对存储IOPS以及OLTP和OLAP的要求越来越高，具体体现在存储不能满足业务关键型应用的需求。从中桥就企业支持当前数据分析和/或进程活动的存储类型分析来看(图3)，FC SAN是企业级用户(42.1%)和中型企业(34.0%)的首选，远高于其他存储类型的企业占比。这是因为FC SAN对OLTP和OLAP的性能稳定性优于其他存储技术。这一调查结果也体现了，目前中国用户大多处于大数据分析的第一阶段，存储和IT架构大多以集中式为主。随着Hadoop和MapReduce的不断普及，用户逐渐进入近实时和实时分析阶段，节点式存储的占比会随之逐渐增加。

▲图3.大数据分析对存储的需求

　　那么在大数据时代企业的存储能够满足需求呢(图4)?中桥调研结果显示，31.6%的用户计划在未来12个月部署新存储来满足业务关键型应用的需求，33.2%计划在未来12-24个月部署新存储。这表明传统存储越来越无法满足业务关键应用的性能需求。在未来24个月，64.8%的用户将会部署新存储来满足大数据时代，业务关键型应用对存储性能越来越高的需求。

▲图4 大数据分析时代存储的发展趋势

　　通过上述一系列大数据对IT资源的需求分析，中桥分析师认为，传统的IT架构、计算方式以及存储正成为中国用户通过大数据分析处理快速提高IT效率，挖掘数据价值的巨大阻碍。而统一、透明、智能的自动化IT架构管理、高密度下卓越的计算能力，以及能够满足存储IOPS与OLTP和OLAP的新型存储则能够为企业创造价值，实现通过IT突破创新来提升企业竞争力的目的。

　　在接下来的系列3中，中桥将就大数据时代下存储所面临的挑战以及其发展趋势进行更为详尽的阐述。

作者:蔡思萌

来源：IT168

原文链接：大数据系列之大数据分析对IT资源的需求

微信关注我们

原文链接：https://yq.aliyun.com/articles/221454

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

戴尔数据库加速：让用户体验“飞”起来

数字化时代，用户体验为王。对于用户来说，都希望减少等待时间，在最短的时间里获得想要的结果。当数据呈指数级增长，数据性能成为影响客户体验的决定因素。以机械硬盘为核心的传统存储，缺乏对性能极大数据处理的灵活性，部署复杂的同时运维成本昂贵。如何让企业的数据库应用体验既快又稳？这对服务提供商们的IT基础架构响应能力提出了更高的要求，特别是数据库的反应速度。为帮助企业提升数据库的响应速度，戴尔数据库加速方案通过不同的软硬件搭配，可以为任何数据库基础架构提供加速（Oracle，MSSQL，SAP，ASE，MySQL等），满足不同规模不同数据规模应用场景的需求。三大方案加速所有数据库应用随着数据存储的爆炸性增长，客户对于系统的架构开放、性能卓越、弹性扩展、成本可控等要求越来越高。戴尔数据库加速方案是一款与数据库、操作系统有着广泛兼容性的块存储设备、软硬结合的端到端解决方案，包括大加速、中加速、小加速解决方案。 “大加速”方案是一套软硬结合的一体化方案，包含软件定义存储组件和相关硬件、数据库服务器、操作系统和数据库等组件。 “中加速”方案的主角是全闪存阵列，戴尔通过丰富的全闪存阵列产品，...

2017-08-31

627

IBM日前宣布将与卡塔尔Sidra医疗研究中心就新的医疗保健工作开展合作。Sidra是一所生物医学研究医院，也是一个教育机构，Sidra曾率先推出全球最大的国家基因组医学研究项目之一的卡塔尔基因组计划（QGP）。卡塔尔Sidra医疗中心研究员据称，Sidra研究中心的计算和存储基础架构将使用IBM技术。换句话说，Sidra研究中心的临床基因组测序数据管理和存储将使用IBM的闪存系统和软件定义基础架构，而且，QGP 计划里的Sidra技术基础设施功能也将由IBM的闪存系统和软件定义基础架构提供。 Sidra研究中心的生物信息技术组经理Mohamed-Ramzi Temanni博士表示，“定期分析几百个样品时，正确地处理负载需要一个健壮的HPC系统。Sidra和IBM的工作是独一无二的，我们的生物信息学专家开展联手合作，这些专家统领复杂的分析组件并构建管道，而IBM将定制所需的系统，以确保最佳性能和易用性。” 另据悉，IBM还宣布了在与密歇根大学的非盈利性tranSMART基金会进行类似的合作，tranSMART基金会旗下的翻译研究平台将由IBM进行优化。tranSMART基金会的翻译...

2017-08-31

585

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。