云基地雷涛：如何让大数据产生大智慧?
会上，来自北京云基地副总经理雷涛发表“大数据时代的大智慧”主题演讲，他指出云计算的一个新的核心生产力就是利用大数据。
▲北京云基地副总经理雷涛
大数据时代的挑战
什么是大数据?IDC调查表明，现在的数据九年以后只有2%。这些数据如果不用的话就是垃圾，是存在于数据中心里的垃圾，如何才能它从数据变成信息，并产生价值?这就是云计算的一个新的核心生产力——利用大数据。
大数据的价值在哪？麦肯锡今年4月份的一个经济模型分析详尽阐述了几个行业中数据本身对整个行业经济的影响。比如说在医疗这个行业，按麦肯锡的规划，大数据本身能够产生3000亿美金的生产力，相当于西班牙整个医疗行业的投资规模的两倍。公共事业上，相当于2500亿欧元，基本等同于希腊GDP。从全球的角度去看，针对这些数据产生的经济价值评估是6000亿美金，由此产生的工作岗位在北美有14万个。
大数据带来了那些挑战？首先一些传统的数据库体系无法捕捉社区网络的信息。北美的一家医院已经普遍开始使用社区网络，某一个医生的医嘱不是写在纸质的凭证上，而是写在了他的Twitter上，以及他个人的网页、blog，然而，这些网络上的信息是一些传统的数据库的体系是不可能捕捉到的。
第二个挑战是数据的海量特性。一个人一生可能产生1个PE的数据，包括人们喜欢的第一本书、第一个音乐、某一个片断、给子女照的照片、有纪念意义的票据，每个人一生可以达到1个PE，这些数据如何存储，如何取用？
提供智能分析，做行为性的分析。对政府而言，比如房地产交易、智能电网领域，每个信息都是局部计算之后实现总体提交，以前通过传统的架构操作这么大规模的数据是不可能的，这些都必须使用的是云技术的大数据技术。
如何让大数据产生大智慧?
如何让大数据本身产生大智慧?雷涛表示，有很多领域可以去做，例如复杂事务的碎片化处理，以及基于信息的扁平架构。
这么多应用原来是跑在服务器上，如何进行优化?例如股票交易，能不能将作业碎片化，并实现分布式计算。交易类型的比如说复杂事件处理的应用，以及交易本身的分析和行为本身的数据，这些都是大数据所涉及到的应用领域。
传统存储方式无法实现太大，如何突破容量的限制？由于内部存的都是数据而不是信息，当这些信息加上描述性标签之后，完全可以是一个扁平的架构，经过跨省、跨地域，这样就可以实现底层呼叫，突破容量的限制。
▲
比如说房地产交易，不需要把所有数据汇总到大型数据库中去计算，因为这是不现实的。那怎么做呢?就在本地去算，这种方式充分利用本地资源以及利用廉价的平台资源来实现，跟传统的结构的差异就是传统的结构是看到应用服务器，而现在看到的更多的是商业逻辑。
▲
这种扁平的框架有什么好处呢?以区域医疗的疾病防护为例。从一家医院走到另外一家医院的时候，原来的X光片如何继续使用?现在区域医疗很难做融合。如果使用了这种新的结构，每一个X光片不需要数据库了，就像谷歌看网页一样，怎么找到网页?扁平的结构可以直接通过Web的方式直接获取所需要的数据，数据中心没有必要再独立建立一套系统，就可以在数据中心获取到这些视频。
原文发布时间为：2011-7-21
本文作者：唐蓉
本文来自云栖社区合作伙伴IT168，了解相关信息可以关注IT168。
