概述:

  1. 是什么?Oracle GoldenGate 提供异构环境间事务数据的实时、低影响的捕获、路由、转换和交付。
    1. 非侵入:
      1. 不建触发器,不建中间表,无需增量标记或时间戳字段
      2. 不在源表上进行数据查询
    2. 低影响:
      1. 直接部署和运行在源端数据服务器时,CPU使用率<3%,内存和网络带宽要求极低
    3. 高实时:
      1. 单条数据同步链路可以持续维持>160GB/小时的数据库日志处理能力,同步延迟在10秒之内
    4. 异构的源和目标:
      1. 广泛支持异构硬件平台和操作系统下的多种不同数据库类型及版本,包括文件和消息队列
    5. 可靠性和事务完整:
      1. 保障事务完整性和顺序
      2. 失败后自动从断点恢复,数据不重复、不遗漏
  2. 应用场景:
    1. 异构源:
      1. 基于日志,实时抓取
      2. Message Bus
    2. 目标:
      1. 零停机移植升级,容灾应急:新的DB/OS/HW/APP
      2. 灵活的高可用性:全面活动的分布数据库
      3. 查询卸载/分流:报表数据库
      4. Oracle 的ETL方案,ODI
      5. 实时BI/实时DW:EDW
      6. 数据分布:多数据中心
      7. SOA/EDA:Message Bus: BPM/BAM/CEP
    3. 特点:
      1. 标准化的单一的技术解决多种不同的需求
      2. 国内:主要场景用于系统的连续可用性和报表/BI系统的实时数据访问的要求。
      3. 附加值高,灵活性高,好东西!
      4. 如果在对OGG的深入理解的基础上,应用规范,就会避免经常abend。
  3. 基本原理:基于日志捕获技术的实时增量数据集成
    1. 捕获EXTRACT:通过读取事务日志,在事务发生时捕获(也可过滤)提交的事务。任何非实际事务均不被复制到目标,保证不传播错误。
    2. 队列TRAIL:准备数据,使数据排入队列以备路由。这个也叫Trail文件
    3. 传输PUMP:分发数据以便路由到目标,可实现一次捕获多次投递。
    4. 路由TCPIP:压缩、加密数据以便路由到目标,最小化的带宽占用。(压缩比很高1/10)
    5. 交付REPLICAT:保证事务数据完整,根据需要转换数据。
  4. 可靠性:
    1. 确保事务完整性
    2. GoldeGate的故障
      1. 进程故障 -> 进程自动重启
      2. Trail文件故障 – –> Checkpoint
    3. GoldenGate以外的故障
      1. 服务器/DB/网络的故障 –> Checkpoint
  5. 灵活性:数据的加工、拓扑的灵活、异构的支持、安装配置的灵活
    1. 可以配置Filter/Map以及转换规则的组件
      1. Capture
      2. Datapump
      3. Replicat
    2. 每个组件的安装时是灵活的,不同于其他产品;
    3. 每个组件的配置也是灵活的,只要trail文件、checkpoint信息在,想怎么玩就怎么玩!
  6. 拓扑结构
    1. 分析型:
      1. 单向,查询分流,一对一
      2. 合并,实时BI,三对一
      3. 集成,整合;实时数据仓库ODS--》EDW;三对一对一. OLTP—ODS—EDW
    2. 操作型:
      1. 双向,1对1
      2. 广播,1对多
      3. 对等,负载均衡;三角形双向
      4. 级联,分布式业务;一对一,然后对三
  7. 产品线:
    1. Oracle Goldengate(凡是安装的都需要license,RAC每个节点都需要license)
    2. Management Pack for Goldengate
      1. Director
      2. Monitor
      3. EM12c plug-in
    3. Goldengate Veridata(不能脱离OGG环境)
    4. Goldengate Application Adapter
  8. 产品下载:
    1. support.oracle.com - 11g的patch即安装包 (12c不是)

Golden Gate 概述的更多相关文章

  1. Oracle Golden Gate概要

    Oracle GoldenGate简介 Oracle Golden Gate用于源数据库与目标数据库的数据复制备份:可以在异构的环境(各种操作系统和数据库)之间实现数据亚秒级的实时复制备份:以及可以在 ...

  2. Oracle Golden Gate - 概念和机制 (ogg)

    Golden Gate(简称OGG)提供异构环境下交易数据的实时捕捉.变换.投递. OGG支持的异构环境有: OGG的特性: 对生产系统影响小:实时读取交易日志,以低资源占用实现大交易量数据实时复制 ...

  3. 转://Oracle Golden Gate 概念和原理

    引言:Oracle Golden Gate是Oracle旗下一款支持异构平台之间高级复制技术,是Oracle力推一种HA高可用产品,简称“OGG”,可以实现Active-Active 双业务中心架构 ...

  4. [转载]Oracle Golden Gate - 概念和机制 (ogg)

    出处:https://www.cnblogs.com/qiumingcheng/p/5435907.html Golden Gate(简称OGG)提供异构环境下交易数据的实时捕捉.变换.投递. OGG ...

  5. Oracle Golden Gate原理简介

    Oracle Golden Gate原理简介 http://www.askoracle.org/oracle/HighAvailability/20140109953.html#6545406-tsi ...

  6. Golden Gate 相关组件介绍:

    OGG组件: Manager: 启动其它进程 Collector Extract Data Pump:可选进程,建议使用 Replicat Trails: 可以压缩,加密 Checkpoint OGG ...

  7. Sybase to Oracle Golden Gate

    Sybase 安装Golden Gate: 下载,然后create subdirs.并且在两端配置好mgr,设置好端口7809 创建golden gate用户ogguser,并且给它授权sa和repl ...

  8. Golden Gate 概念和机制

    1. OGG有哪些进程 ü  Manger : manger进程是goldengate的控制进程,分别运行在源端和目标端上,它主要的作用是启动.监控.重启goldengate的其他进程,报告错误及事件 ...

  9. golden gate 加initial load 在rac 上的配置

    前言goldengate 11g 在oracle 11g rac 上的配置 (源是rac+asm , 目标是单数据库实例) 源端: 1. 配置tnsnames [oracle@rac1 admin]$ ...

随机推荐

  1. 杭电2053 WA

    #include<stdio.h> int main() { ]; while(scanf("%d",&n)!=EOF) { ;i<=;i++) { a[ ...

  2. offset() 方法 文档偏移量

    以前看视频学习听到这个offset()感觉很陌生,没有用过,马上记到笔记里了,今天翻起笔记再次看到,都已经忘记是怎么用的了,所以来到这里狠狠的记下来: offset() 方法返回得或设置元素相对于文档 ...

  3. VGG 19

    关于VGG19的一些参考资料 http://www.cnblogs.com/vipyoumay/archive/2017/11/23/7884472.html https://cloud.tencen ...

  4. Java中的常量

    常量的概念 是指在Java程序中固定不变的数据.我们可以理解为是一种特殊的变量,它的值被设定后,在程序运行过程中不允许改变. 常量的分类 整数常量:  所有的整数   例如 100 -100 123 ...

  5. 百面机器学习--跟课Task整理

    涉及书中内容:特征工程&&模型评估 不同的特征如何进行特征工程? 特征是原始数据作为输入,特征工程的结果,作为输入供算法和模型使用. 对于数值型特征,为消除特征间的量纲影响,应对特征进 ...

  6. node——通过express模拟Apache实现静态资源托管

    1.express中处理静态资源的函数 创建一个app.js作为入口文件,创建一个public文件夹作为静态资源文件夹 var app=express();var fn=express.static( ...

  7. IOS开发:使用lipo合并armv7,i386,armv7s库文件

    假设多个版本的lib分别是 libxxx.armv7.a , libxxx.armv7s.a, libxxx.i386.a我们的目标是 把他们合并成超级通用版的libxxx.a  打开命令行 Term ...

  8. iOS tcpdump抓包方法(需越狱)

    前提条件:机器要破解,cydia能打开 需要工具1.openssh2.tcpdump 安装工具方法:1.连接网络,打开cydia2.确认Cydia设置为开发者模式(管理->设置->开发者) ...

  9. js通过String取得对应全局Object的值

    //假设有个全局对象Person var Person = { 'name' : 'alice' } //通过某种配置,获得了字符串形式的对象名 var thisPerson = 'Person'; ...

  10. vue中数组变动更新检测

    Vue 包含两种观察数组的方法分别如下 1.变异方法 顾名思义,变异方法会改变被这些方法调用的原始数组,它们也将会触发视图更新,这些方法如下 push() pop() shift() unshift( ...