基于OGG Datahub插件将Oracle数据同步上云-低调大师

基于OGG Datahub插件将Oracle数据同步上云

2016-12-08 807

本文用到的

阿里云数加－大数据计算服务MaxCompute产品地址：https://www.aliyun.com/product/odps

一、背景介绍

随着数据规模的不断扩大，传统的RDBMS难以满足OLAP的需求，本文将介绍如何将Oracle的数据实时同步到阿里云的大数据处理平台当中，并利用大数据工具对数据进行分析。

OGG（Oracle GoldenGate）是一个基于日志的结构化数据备份工具，一般用于Oracle数据库之间的主从备份以及Oracle数据库到其他数据库（DB2, MySQL等）的同步。下面是Oracle官方提供的一个OGG的整体架构图，从图中可以看出OGG的部署分为源端和目标端两部分组成，主要有Manager，Extract，Pump，Collector，Replicat这么一些组件。

Manager：在源端和目标端都

微信关注我们

原文链接：https://yq.aliyun.com/articles/66139

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

云栖说：阿里巴巴技术背后的那些事

阿里巴巴强大的技术能力背后有哪些不为人知的秘密，阿里云那些高大上的技术专家又有那些能够令人眼前一亮的观点？VR面对的未来是怎样的？Uber为什么从PG切换到MySQL？人类和人工智能的未来是什么样的？面对Hadoop，企业应该如何抉择？传奇人物阿里AI科学家又有哪些不为人知的故事？尽在云栖说。【云栖说】第一期：产业、技术、资本、生态，从2015年下半年开始，似乎全世界的风都吹向了VR。前段时间的淘宝造物节上，从“吾皇万睡”、“故宫淘宝”的淘宝创客，到“Buy+买包包”、“ReLoad VR枪战”的黑科技娱乐，无一不彰显VR在未来的无限可能。当前VR标准如何？挑战有哪些？生态怎样？大家都怎么看待VR……尽在《首期脱口秀，淘宝造物节背后的VR技术》【云栖说】第二期： Uber宣布数据库从PG切换为MySQL后，技术领域掀起讨论热潮，阿里

2016-12-09

623

1 简介序列化和反序列化就是结构化对象和字节流之间的转换，主要用在内部进程的通讯和持久化存储方面。通讯格式需求 hadoop在节点间的内部通讯使用的是RPC，RPC协议把消息翻译成二进制字节流发送到远程节点，远程节点再通过反序列化把二进制流转成原始的信息。RPC的序列化需要实现以下几点： 1.压缩，可以起到压缩的效果，占用的宽带资源要小。 2.快速，内部进程为分布式系统构建了高速链路，因此在序列化和反序列化间必须是快速的，不能让传输速度成为瓶颈。 3.可扩展的，新的服务端为新的客户端增加了一个参数，老客户端照样可以使用。 4.兼容性好，可以支持多个语言的客户端存储格式需求表面上看来序列化框架在持久化存储方面可能需要其他的一些特性，但事实上依然是那四点： 1.压缩，占用的空间更小 2.快速，可以快速读写 3.可扩展，可以以老格式读取老数据 4.兼容性好，可以支持多种语言的读写hadoop的序列化格式 hadoop自身的序列化存储格式就是实现了Writable接口的类,他只实现了前面两点，压缩和快速。但是不容易扩展，也不跨语言。我们先来看下Writable接口，Writable接口定...

2016-12-09

675

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。