如何让云计算与企业大数据强强联手?

本文讲的是如何让云计算与企业大数据强强联手,大数据是高性能计算领域最热门的趋势。大数据往往是非结构化的大规模数据,这些庞大的数据集中蕴含着对企业极具价值的情报信息。而云计算在过去几年一直是IT世界的宠儿,因为云计算开创了计算作为服务的新时代,尽管人们对于云计算的安全、可用性和成本仍然存在疑虑。

  大数据的规模似乎能够成为云计算有趣的合作伙伴。大规模数据的管理存在很高的复杂性,正因为如此,大数据分析通常在本地服务器集群中进行。而云计算的优势在于尽可能有效地优化现有资源。如果部署得当,你没有理由不结合大数据和云计算的优势。

  通过业务分析在云环境挖掘大数据的价值并不会很麻烦,但是也有一些具体的策略来确保你的企业具有最佳效率。为了让企业在访问、分析和改善其业务操作方面处于领先位置,大数据和云环境都必须满足一定条件。

  首先,让我们看看你的大数据业务分析工具必须具备的三个能力:

  1. 使用能够本地连接到所有主要大数据来源(例如Hadoop和NoSQL存储)的业务分析工具。

  2. 管理能力: 确保业务分析工具能够有效地管理和协调大数据任务以及传统IT任务

  3. 整合能力: 用于分析的数据很少是来自单一来源。业务分析工具必须具备很好的数据整合能力,需要能够有效地整合传统关系型数据库和非传统大数据存储间的数据,例如Hadoop和NoSQL数据库。

  大数据业务分析对云环境的要求也同样重要。云环境的主要优势在于具有弹性,根据需要付费,不需要管理企业内部硬件。例如,一家媒体公司在正常情况下,使用其自有的50台专用服务器集群就能够满足其数据处理需求。然而,在超级杯或世界杯期间,需要被处理的数据量可能会增加8到10倍,所以他们通过在公共云临时增加另外200台服务器来满足其需求。以下是你的大数据分析工具成功地在云环境运行应该具备的三个条件:

  1. 与云供应商无关: 找到一种能够在任何云服务(公共云或私有云)运行的分析工具

  2. 弹性: 确保能够在高峰负荷时期快速方便地添加任何计算资源,并在正常情况下减少资源以降低成本

  3. 数据通信带宽: 确保你部署了数据通信管道以有效地将原始大数据移动到云环境。可能你的大数据资源(例如web日志)已经位于云环境中,在这种情况下,你只需要简单地将大数据文件从一个云供应商复制到另一个云供应商即可。

  总之,如果部署得当的话,大数据和云环境的结合绝对是强强联手。

原文发布时间为:2012-03-31

本文作者:     刘亚琼 

本文来自云栖社区合作伙伴IT168,了解相关信息可以关注IT168

优秀的个人博客,低调大师

微信关注我们

原文链接:https://yq.aliyun.com/articles/223794

转载内容版权归作者及来源网站所有!

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

相关文章

发表评论

资源下载

更多资源
Mario,低调大师唯一一个Java游戏作品

Mario,低调大师唯一一个Java游戏作品

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

Oracle Database,又名Oracle RDBMS

Oracle Database,又名Oracle RDBMS

Oracle Database,又名Oracle RDBMS,或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统,系统可移植性好、使用方便、功能强,适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Eclipse(集成开发环境)

Eclipse(集成开发环境)

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言,它只是一个框架和一组服务,用于通过插件组件构建开发环境。幸运的是,Eclipse 附带了一个标准的插件集,包括Java开发工具(Java Development Kit,JDK)。

Sublime Text 一个代码编辑器

Sublime Text 一个代码编辑器

Sublime Text具有漂亮的用户界面和强大的功能,例如代码缩略图,Python的插件,代码段等。还可自定义键绑定,菜单和工具栏。Sublime Text 的主要功能包括:拼写检查,书签,完整的 Python API , Goto 功能,即时项目切换,多选择,多窗口等等。Sublime Text 是一个跨平台的编辑器,同时支持Windows、Linux、Mac OS X等操作系统。