首页 文章 精选 留言 我的

精选列表

搜索[关系代数],共10001篇文章
优秀的个人博客,低调大师

阿里巴巴下一代数据集成技术

摘要 数据集成是把不同来源、格式、特点性质的数据在逻辑上或物理上有机地集中,从而为企业提供全面的数据共享。在企业数据集成领域,已经有了很多成熟的框架可以利用。目前通常采用联邦式、基于中间件模型和数据仓库等方法来构造集成的系统,这些技术在不同的着重点和应用上解决数据共享和为企业提供决策支持。 视频分享地址:https://v.qq.com/iframe/player.html?vid=o0547tqlw0z&width=670&height=376.875&auto=0 数据工厂 数据工厂解决了云上从数据的采集整合,到数据加工、分析与管理,再到数据应用和消费的整个流程。 上图中红色标注部分是数据集成的位置。数据集成既是把数据采到数据平台部分的数据通道,也是数据出去的通道。 中间就是所有数据的清洗转换、调度、OLAP分析以

优秀的个人博客,低调大师

用数字化数据战略取代数据“收集和管理”

随着数据量的剧增,以及业务使用数据的增加,传统的“数据优先”战略不再适用。CIO们必须制定数字化数据战略。 全球各地的企业正在使用更多的数据用于更多的用途。如今,公司不仅使用数据来提高运营效率,而且以新的方式为客户服务、创造新的收入来源。这些机会利用了新的数据来源,例如社交媒体和物联网,同时,还有很多业务方面出现的数据技能和分析。 此外,许多CIO正在改变IT的运营模式,以更好地支持其公司的数字化目标。鉴于数据对这些目标的重要性,只有改变IT支持数据和分析的方式,才能改变运营模式。 为什么需要数字化数据战略? 大多数企业处理数据的方式,在过去20年都没有太大变化。公司通常的战略是数据优先,即收集整个企业的数据,并能够访问它们。这就是“收集和管理”模式,明确数据的所有权,并制定访问它们的规则。 但在数字化时代,这个模式让公司面对几大问题。 首先,尽管企业的数据计划是全面的,但是,随着数据量的剧增,效率越低。需要多年才能完成或直接失败。第二,一些公司限制对于那些有价值但是原始的数据的访问。这阻碍了测试和学习实验,这通常是发现数据新用途的最佳方法。最后,数据的价值更多的来自于整合 –无论是公司内的整合,或者内部和外部数据的整合 -- 这就很难明确数据所有权。 数字化数据战略从业务目标入手 在数字化时代,CIO们需要新的战略来管理数据。良好的数据战略从清晰认定潜在业务目标开始,不仅仅是考虑技术和数据,而是考虑为了实现这些目标,所需的人员和流程。 从业务目标开始,意味着能够带来业务价值的数据,应该获得最多的关注。例如,如果一家公司希望提高客户购买的份额,那么公司用于评估客户购买更多产品的潜力的数据,应该优先于客户的其他数据。而如果业务目标从购买份额转变为获取新客户,那么数据项目的关注点也应该发生改变。这种灵活的业务目标驱动方式的特征包括: 积极推动业务主导的分析:虽然数据基础设施的技能由IT掌握,但先进的企业意识到使用数据的最佳方案来自于业务部门。业务部门中的分析团队,将越来越普及,但他们的成熟度和关注点则各有不同。例如,有些只是简单的业务智能报告团队,只是被重命名为数据科学或分析团队,而有些则是经验丰富的团队,完全有能力使用高级分析。 公司的数据战略,应该鼓励这些分析团队的开发。IT部门应与其他业务部门紧密合作,为业务部门招聘数据科学家和分析师,但招聘还不够。现有人员的分析技能也需要关注。许多公司发现,大多数员工缺乏有效使用数据做出决策的技能和判断力。因此,有效的数据战略应该包括缩小分析技能差距的投入。 使数据治理迭代化,所有权协作化:传统的数据治理政策往往是静态的,永久的和明确的。例如,在许多公司,数据管理和标准需要多年才能确立,要改变则要花费更多时间。类似地,数据所有权通常是二元性的 – 要么有数据所有权,要么没有。当数据技术,用户或用途发生迅速变化时,都会产生问题。相反,数字化数据战略应该包括灵活,迭代和协作的治理模式,可以从新的使用数据的方式中,快速获取价值,并认识到那些会涉及许多方的用途。 分解数据和用户:并非所有的数据都应该用相同的方式处理,所有的用户都不应该被强制使用相同的分析工具。一些类型的数据和某些用户组,比其他数据和用户创造的价值更多,应该区别对待。因此,数据战略应该支持一系列的工具,让更成熟的分析团队选择适合自己需求的分析工具。同样地,战略应该意识到质量值的不同,在许多情况下,不太完美的数据仍然是有价值的。 此外,随着更多的分析自动化,数据战略不应该忽视创建用于机器决策算法的团队。例如,在固定设备上创建传感器的团队,预测设备何时需要维护,他们需要特定的数据和技术,以及高水平的能力。他们的支持方式不应该和普通报告团队一样。 CDO的职能? 讨论数字化数据战略,就必须提及首席数据官(CDO)的职能。我们面向全球146家公司的2016年调查结果显示,有39%的受访者相信在2017年底之前会招聘一位CDO。一些CDO负责数据的所有方面(例如质量、治理、技术),而其他,则负责业务目标,而不是管理所有的数据——作为中间人,帮助业务领导发现潜在业务目标。这些CDO可能会在数字化数据战略中负责一些重要的数据项目,但他们最大的价值,是业务部门的数据和洞察顾问。 数字化是数据战略新方法的触发。坚持采用传统数据优先方法的公司将难以跟上新兴的机遇和风险。但是,那些考虑业务目标和数据用户的企业,将为公司发展和竞争优势做出贡献。 本文转自d1net(转载)

优秀的个人博客,低调大师

下一代数据中心从精品机房开始

在混合云、大数据的今天 ,在大量应用潮流下,社会产生了大量的数据,数据时代需要大量的数据中心来存数据,如何实现数据中心的价值呢?那么数据中心迅猛增长,节能降耗无法回避、互联互通无法回避。 同时我们也清晰的看到公有云对数据中心的业务冲击和影响 。但是我们也看到不管大小公司 有一个核心需求就是保证数据的安全,那么就会有大量的选择是一定放在私有云上。就在云时代上弹性的云同时,互联网发展密切相关的需求。很多云在运营过程中出现断网不能服务的现象。都要架构在可靠安全的数据中心上。 面对全新的云市场,世纪互联提出全新的云战略,世纪互联将以精品机房为核心基础,提供领先的网络和运维服务,这样就可以与不同云平台展开合作。 世纪互联推精品机房这样一个理念,世纪互联的高级副总裁麻静平先生最近接受了ZD至顶网的采访,谈了精品机房讲师世纪互联在数据中心层面未来关注的战略聚焦点。 大家知道世纪互联拥有近20年的数据中心专业建设、运维经验,为用户提供高可用性绿色数据中心托管服务,目前,世纪互联在全国30多个城市运营80多个分布式数据中心,拥有2.3万个机柜和500多个网络节点,骨干传输网总长15000km,传输带宽高达160G,具有优质的网络可靠性和稳定性。世纪互联具有丰富多样的高品质BGP产品,提供高速的互联网及专线接入服务。世纪互联保证99.9%网络可靠性和99.99%的电力供应。 什么叫精品机房?麻静平认为从数据中心这个业务本身看,是一个跨专业度非常宽的产品,就是从进入高低压电、制冷、储存、环保,包括还有网络本身的东西,还有服务体系等等。今天你会发现市场突然冒出很多做数据中心的,但是世纪互联打造自己的精品机房和精品机柜,就是说实际上是从提需求开始,就把差异化做出来。世纪互联把国际通用的,以及国内国标的体系底下,安装实际需求,根据20多年的行业经验教训的积累推出的。 “我总结下来,其实是世纪互联及我们快20年的数据中心,不仅仅是从设计提需求,设计、建设、运输过程中碰到的各种问题,材料的问题,折回后再去整改,整改完了以后再验收,最后在运行过程中又发现设计上有哪些不足的地方,再去下次设计的时候,再去优化。” 麻静平认为精品机柜创新有两个点 第一监控,全国级的中央监控,第二是管理 20年的经验 可以输出设计、管理、人才体系。同时世纪互联给出三个方向打造真正的精品机房: 第一是打造国际标准 世纪互联率先通过了英国UKAS和美国RAB双重认证,并率先在国内推行国际标准的SLA 服务品质协议,为客户提供专业、全面运营服务。通过监控系统7×24×365不间断实时监控,及时处理、上报、记录告警信息、统计监控数据提供报告,监控数据定期备份,保证数据安全,并任意调取检查;全年执行运维规定的巡检时间、巡检路线、巡检项目; 制定属地化机房预算费用,合理优化运行方案,降低运行成本;高效的文档管理,基于ITIL管理架构和ISO20000、ISO27001标准要求,对内部文档进行合理安全有效管理、审查;依靠制度、流程对设备全生命周期管理,提高设备可用性。 全球领先的绿色数据中心,世纪互联始终将数据中心能耗放在首要任务。 通过以下措施保证了机房全年PUE<1.5。调节冷水机组冷冻水出水温度;冷却塔变频精准控制冷却水温度,水泵变频控制,根据负荷控制水泵流量;合理控制机房温湿度,关注季节变化及时切换Free cooling模式,冬季使用Free cooling可省去冷机能耗。 第二打造互联互通 目前来讲,数据中心真正关心的第一个就是互通性,也就是互联互通能力的建设。今天世纪互联提到BGP全网解决方案,麻静平认为BGP解决了一个用户可以接入到任何网络里面去。 BGP能帮助移动、电信、联通三大运营商以外的中小运营商通过世纪互联的机房链接起来。连过来以后解决两个问题,第一个问题这个网站那些中小运营商访问这个网站不用绕电信、联通那么一大圈才能到我们这儿直接过来了。第二因为不绕这一圈,他可能相对来说省不少的费用成本,所以说电信非常明显的感觉。第一可以降低成本,第二直接大幅度的提升了用户的感知。我们要解决中小运营商的直联,在这里我们交换了能力。 互联互通的核心是可以解决用户对于云的弹性需求,通过世纪互联交换平台,用户可以实现在公有云和私有云之间在云的交换。 第三打造极致的体验 麻静平谈到世纪互联自主运营管理,以及服务体系目前大概有100多项服务,能够满足大中小型企业的需求,,同时世纪互联的基础架构也是可靠安全。包括两个机房之间达到光纤直连,可靠性达到三个九。而且世纪互联为用户提供专属的IDC顾问,包括7X24小时的全天候服务。 最后综合来说,麻静平认为世纪互联推出精品机房毕竟只是IT系统的一部分。怎么让有限的机柜,满足用户的全方位需求。就需要世纪互联为用户提供最可靠的从设计到建设到体系,到网络维护,的全方位一个解决方案。 原文发布时间为:2016年04月22日 本文作者:任新勃 本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。

资源下载

更多资源
Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

腾讯云软件源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题,腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构,目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring

Spring框架(Spring Framework)是由Rod Johnson于2002年提出的开源Java企业级应用框架,旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念,提供核心容器、应用上下文、数据访问集成等模块,支持整合Hibernate、Struts等第三方框架,其适用范围不仅限于服务器端开发,绝大多数Java应用均可从中受益。

WebStorm

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源,继承了IntelliJ IDEA强大的JS部分的功能。

用户登录
用户注册