manager參数:

AUTOSTART:指定在mgr启动时自己主动启动那些进程.
AUTOSTART ER *
AUTOSTART extract extsz 

AUTORESTART:指定在mgr能够定时重新启动那些进程。

能够在网络中断等故障恢复后自己主动重起。避免人工干预.

AUTORESTART ER *, WAITMINUTES 5, RETRIES 3

DYNAMICPORTLIST:指定GoldenGate能够使用那些port接受extract发送过来的数据.
DYNAMICPORTLIST 7840-7850

PORT:制定GoldenGate的mgr进程使用哪个 TCP/IPport侦听请求.
PORT 7809

LAGCRITICAL:指定觉得超过此时间即为严重错误的延迟最大值,假设延迟达到此时间值则会在ggserr.log里面写入一条error信息
LAGCRITICALMINUTES 10 

LAGREPORT:指定在ggserr.log中报告延迟的时间间隔.
LAGREPORTHOURS 1 

PURGEOLDEXTRACTS :定义自己主动删除过时的队列以节省硬盘空间。一般依照两个规则来删除:首先。要满足检查点要求,没有使用过的队列不能删除,保证无数据丢失;其次,能够保留一定的天数。

仅仅有当已经使用过且超过设定的天数后的队列会被自己主动删除。

purgeoldextracts /backup/goldengate/dirdat/*,usecheckpoints, minkeepdays 7


抽取參数:
CHECKPARAMS:假设增加该參数,表示下次执行仅仅是检查一下语法,并不实际执行进程。
注意:该命令仅仅能检查一些简单语法,并不能保证參数文件是全然正确的。
COMMENT:凝视行。也能够用两个中划线--取代.--checkparams表示本行已经被凝视掉 
EXTRACT :定义抽取进程的名字 
OBEY :能够将外部文件的内容包括到本參数文件里来。用于将一些能够反复利用的參数文件部分内容隔离出来,便于统一改动。
Obey tables.txt
TABLEEXCLUDE :定义所须要排除的表。

假设在table里面定义了使用通配符,那么能够使用该參数定义排除掉当中的部分表。

如:

tableexclude ctais2.TMP_*;
tableexclude ctais2.TEMPTAB; 
GETUPDATEAFTERS | IGNOREUPDATEAFTERS 是否在队列中写入后影像,缺省复制 
GETUPDATEBEFORES | IGNOREUPDATEAFTERS 是否在队列中写入前影像,缺省不复制 
GETUPDATES | IGNOREUPDATES 是否复制update操作。缺省复制
GETDELETES | IGNOREDELETES 是否复制delete操作,缺省复制
GETINSERTS | IGNOREINSERTS 是否复制insert操作。缺省复制
GETRUNCATES| IGNORETRUNCATES 是否复制truncate操作,缺省不复制.
RMTHOST 指定目标系统及其GoldenGate Manager进程的port号。也用于定义是否使用压缩进行传输。
rmthost  99.16.1.12,mgrport 7809, compress
RMTTRAIL 指定写入到目标端的哪个队列。

EXTTRAIL 指定写入到本地的哪个队列。 
SQLEXEC 在extract执行时首先执行一个sql语句。

sqlexec "Alter session set constraints=deferred"

PASSTHRU 禁止extract与数据库交互,适用于Data Pump传输进程(dpeXX)
GETENV | SETENV 针对extract进程设定系统环境变量。 setenv ( NLS_LANG = AMERICAN_AMERICA.ZHS16GBK ) 
REPORT 定义自己主动定时报告。

REPORT AT 01:59

STATOPTIONS 定义每次使用stat时统计数字是否须要重置
REPORTCOUNT 报告已经处理的纪录条数统计数字
TLTRACE 打开对于数据库日志的跟踪日志 
TRACE/TRACE2 打开对GoldenGate进程的跟踪日志,一般用于调试。 
DISCARDFILE 定义discard文件位置。假设处理中有纪录出错会写入到此文件里
discardfile /oradata/goldengate/repkj.dsc,append,megabytes 100m
NUMFILES 定义本extract为最大多少张表预留空间,缺省为500,超过500张表须要设定一个比实际表数略大的值
numfiles 3000
PURGEOLDEXTRACTS 同mgr进程。能够设置自己主动删除队列,建议在mgr设置
REPORTROLLOVER 设定切换一个日志的时间和间隔 reportrollover at 02:00
TRANSMEMORY 设定GoldenGate的抽取进程可以使用的内存大小。例如以下參数指定本进程最大仅仅能占用2G内存,当中每一个事务最大占用内存不能超过500M。假设超过则使用指定文件夹作为虚拟内存,该文件夹下的单个文件大小为4G,最多仅仅能在该文件夹下占用8G空间作为缓存。
transmemory directory (/backup/goldengate/dirtmp,8G,4G),ram 2G,transram 500M
DBOPTIONS  指定对于某种特定数据库所须要的特殊參数。

[SOURCEDB,] USERID ,PASSWORD 指定所要登陆的数据库名称。username和password。对于oracle无需指定sourcedb。直接指定username和password就可以。
Userid goldengate, password goldengate 
TRANLOGOPTIONS 指定在解析数据库日志时所须要的特殊參数。比如,对于裸设备,可能须要增加下列參数
tranlogoptions rawdeviceoffset 0 
tranlogoptions altarchivelogdest instance sidname /arch  --指定归档日志所在
WARNLONGTRANS 指定对于超过一定时间的长交易能够在ggserr.log里面写入警告信息。

比如。每隔30分钟检查一次长交易,对于超过12个小时的进行告警:--warnlongtrans 12h, checkintervals 30m



复制參数:
CHECKPARAMS 检查參数语法然后停止
COMMENT 凝视行
REPLICAT 定义进程名称
USERID 指定登陆目标数据库的username和password
OBEY 将外部文件包括到參数文件里
ASSUMETARGETDEFS 假定两端数据结构一致使用此參数
SOURCEDEFS 假定两端数据结构不一致。使用此參数指定源端的数据结构定义文件。

该文件须要由GoldenGate工具产生

MAPEXCLUDE 用于使用在map中使用*匹配时排除掉指定的表,类似于于源端的tablexclude
mapexclude CTAIS2.JC_GY_SWWSWH
MAP ctais2.* ,TARGET ctais2.*; 

GETDELETES | IGNOREDELETES 是否复制delete操作,缺省为复制
GETUPDATES |IGNOREUPDATES  是否复制update操作。缺省为复制
GETINSERTS | IGNOREINSERTS 是否复制insert操作,缺省为复制
GETUPDATEAFTERS | IGNOREUPDATEAFTERS 是否读取后影像,缺省为读取
GETUPDATEBEFORES | IGNOREUPDATEBEFORES 是否读取前影像,缺省为不读取
GETTRUNCATES | IGNORETRUNCATES 是否复制truncate操作,缺省为不复制
allownoopupdates 同意运行无实际变化的update。比如,update a=a会纪录一条update。可是没有后影像,无法正确构筑where语句
REPERROR 定义出错以后replicat的响应,一般能够定义为两种:Abend,即一旦出现错误即停止复制。此为缺省配置;Discard,出现错误后继续复制。仅仅把错误的数据放到discard文件里。

DISCARDFILE 定义出错数据的输出文件。当数据出现错误后。能够用于查找错误原因 
discardfile /oradata/goldengate/dirrpt/repsz.dsc,append, megabytes 10
HANDLECOLLISIONS 自己主动过滤反复时段的数据冲突,用于不能停机运行初始化。打开该參数后不会将数据错误报到discard文件里。

DYNAMICRESOLUTION 使replicat动态解析表的结构,加快启动速度。缺省为每次启动解析全部要复制表的结构 
SQLEXEC 调用存储过程或者运行sql语句。能够将返回值作为根据进行过滤条件。或者用户改变session变量。
GROUPTRANSOPS 将小的交易合并成为一个大的交易进行提交,降低提交次数,降低系统IO消耗。
MAXTRANSOPS 将大交易拆分。每若干条纪录提交一次 maxtransops 1000
BATCHSQL 针对批处理中针对某个表的大批量反复操作进行优化,提高批处理的处理速度。 
DBOPTIONS 定义与数据库类型相关的特殊处理方式。
NUMFILES 定义进程中表的最大数据量,缺省为 500.
PURGEOLDEXTRACTS 定义自己主动删除队列,一般建议在mgr进程配置。


错误定位时常常使用以下三个參数:
nodynsql

nobinarychars

showsyntax

 
DYNSQL | NODYNSQL
Valid for Replicat
Use the DYNSQL and NODYNSQL parameters to control the way that SQL statements are 
formed. With NODYNSQL, Replicat uses literal SQL statements with the bind variables 
resolved. With DYNSQL, the default, Replicat uses dynamic SQL to compile a statement 
once, and then execute it many times with different bind variables. 
● Statement with DYNSQL:
UPDATE <table> ... WHERE ID = :B
● Statement with NODYNSQL: 
UPDATE <table> ... WHERE ID = ‘1234’
In most environments, using DYNSQL yields the best efficiency and most throughput. 
However, in isolated instances, using NODYNSQL has proven faster and more efficient. Try 
NODYNSQL only if Replicat throughput appears unsatisfactory.
Do not use DYNSQL when replicating to target databases that do not support dynamic SQL.
When using NODYNSQL, you must also use the NOBINARYCHARS parameter。
Oracle GoldenGate for MySQL does not support LOB replication in NODYNSQL mode. 
Default DYNSQL
Syntax DYNSQL | NODYNSQL

BINARYCHARS | NOBINARYCHARS
Valid for Extract and Replicat
Use BINARYCHARS and NOBINARYCHARS to control whether character data is treated as binary data or null-terminated strings.
BINARYCHARS, the default, maintains data the way it was entered in the source table. This 
ensures proper processing in cases when a column in the source or target database is 
defined as a character column and it is possible that binary characters could be entered 
into that column. BINARYCHARS is not compatible with the BULKLOAD parameter (direct-bulk load); use NOBINARYCHARS.
NOBINARYCHARS can cause Oracle GoldenGate to interpret a binary character to be the end 
of the data in that column. If there is more data after the binary data, it is not processed 
by Oracle GoldenGate, compromising data integrity. NULL characters cause this to happen, 
as well as any character defined with the DELIMITER option of FORMATASCII. Unless there is 
good reason to use NOBINARYCHARS, leaving the default set to BINARYCHARS is recommended so 
that data is maintained the way it was entered in the source table. Before using 
NOBINARYCHARS, contact Oracle Support.
BINARYCHARS and NOBINARYCHARS are table-specific. One parameter remains in effect for all 
subsequent TABLE or MAP statements until the other is encountered.
Default BINARYCHARS
Syntax BINARYCHARS | NOBINARYCHARS

SHOWSYNTAX
Valid for Replicat
Use the SHOWSYNTAX parameter to start an interactive session where you can view each Replicat SQL statement before it is applied. By viewing the syntax of SQL statements that failed,
you might be able to diagnose the cause of the problem. For example, you could find out that the WHERE clause is using a non-indexed column.Requirements
for using SHOWSYNTAX
● The first time that you use SHOWSYNTAX, request guidance from an Oracle Support analyst. It is a debugging parameter and can cause unwanted results if used improperly.
It requires manual intervention, so automated processing is suspended, and it slows down processing, which can cause backlogs and latency.
● To use SHOWSYNTAX, Replicat must be started from the command shell of the operating system. Do not use SHOWSYNTAX if Replicat is started through GGSCI. 
● Use SHOWSYNTAX in a test environment. Create duplicates of your Replicat groups and target tables so that the production environment is not affected. 
Using SHOWSYNTAX
1. In the Replicat parameter file, include the following parameters in the order shown 
here, each on its own line:
❍ NOBINARYCHARS
❍ NODYNSQL
❍ SHOWSYNTAX
NOTE NOBINARYCHARS is an undocumented parameter that causes Oracle GoldenGate 
to treat binary data as a null-terminated string. Contact Oracle Support before 
using it. NODYNSQL causes Replicat to use literal SQL statements instead of using dynamic SQL with bind variables. 
2. From the Oracle GoldenGate home directory, start Replicat from the command shell of the operating system using the syntax shown here. Do not specify a reportfile option. 
Output must go to screen.
replicat paramfile dirprm/<Replicat_name>.prm 
3. The first SQL statement is displayed with some prompts.
❍ Choose Keep Displaying (the default) to execute the current statement and display the 
next one.
❍ Choose Stop Display to resume normal processing and stop printing SQL statements 
to screen.
4. When finished viewing syntax, remove SHOWSYNTAX, NOBINARYCHARS, and NODYNSQL from 
the parameter file.
Default None
Syntax SHOWSYNTAX


11.1版本号的OGG Bounded Recovery BR參数可能会有非常多问题。最好关闭,然后配合操作系统监控长事务,定时杀掉长事务。避免出现故障。

然后

配置CACHESZIE为一个值。避免影响系统性能。


tranlogoptions logretention disabled
tranlogoptions dblogreader
DBLOGREADER :
(Oracle) Valid for Extract in classic capture mode.Causes Extract to use a newer ASM API that is available as 
of Oracle 10.2.0.5 and later 10g R2 versions, and Oracle 11.2.0.2 and later 11g R2 versions (but not in Oracle 11g R1 versions). This API uses the database
server to access the redo and archive logs, instead of connecting directly to the Oracle ASM instance. The database must contain the 
libraries that contain the API modules and must be running.To use this feature, the Extract database
user must have SELECT ANY TRANSACTIONprivilege. When
used, DBLOGREADER enables Extract to use a read size of up to 4 MB in size. This is controlled with the DBLOGREADERBUFSIZE option
The maximum read size when using the default OCI buffer is 28672 bytes. This is controlled by the ASMBUFSIZE option.
A larger buffer may improve the performance of Extract when redo rate is high. 
When using DBLOGREADER, do not use the ASMUSER and ASMPASSWORD options of TRANLOGOPTIONS. The API uses the user and password specified with the USERID parameter。

goldengate一些參数整理的更多相关文章

  1. PHP中$_SERVER的具体參数与说明

    PHP编程中常常须要用到一些server的一些资料.特把$_SERVER的具体參数整理下,方便以后使用. $_SERVER['PHP_SELF'] #当前正在执行脚本的文件名称,与 document ...

  2. 命令行參数选项处理:getopt()及getopt_long()函数使用

         在执行某个程序的时候,我们通常使用命令行參数来进行配置其行为.命令行选项和參数控制 UNIX 程序,告知它们怎样动作. 当 gcc的程序启动代码调用我们的入口函数 main(int argc ...

  3. 【JAVA学习】“-Xmx1024m -Xms1024m -Xmn512m -Xss256k”——Java执行參数(转)

    年轻代 年老代概念 http://jefferent.iteye.com/blog/1123677 JVM的堆的内存, 是通过以下面两个參数控制的  -Xms 最小堆的大小, 也就是当你的虚拟机启动后 ...

  4. ORACLE 11G没有备份文件參数文件在异机通过rman备份恢复找回被误删的数据

    背景:          同事误删除线上数据.所以须要从备份中找回数据恢复. 真实屋漏偏逢连夜雨.船迟又遇打头风.前两天备份的磁盘坏块,如今仅仅有rman全备的.bak文件,没有控制文件和參数文件,所 ...

  5. JVM垃圾收集相关经常使用參数

    參 数 描 述 UseSerialGC 虚拟机执行在Client 模式下的默认值,打开此开关后,使用Serial + Serial Old 的收集器组合进行内存回收 UseParNewGC 打开此开关 ...

  6. 【深夜福利】Caffe 添加自己定义 Layer 及其 ProtoBuffer 參数

    在飞驰的列车上,无法入眠.外面阴雨绵绵,思绪被拉扯到天边. 翻看之前聊天,想起还欠一个读者一篇博客. 于是花了点时间整理一下之前学习 Caffe 时添加自己定义 Layer 及自己定义 ProtoBu ...

  7. JVM、垃圾回收、内存调优、常见參数

    一.什么是JVM JVM是Java Virtual Machine(Java虚拟机)的缩写.JVM是一种用于计算设备的规范.它是一个虚构出来的计算机,是通过在实际的计算机上仿真模拟各种计算机功能来实现 ...

  8. server.htaccess 具体解释以及 .htaccess 參数说明

    .htaccess文件(或者"分布式配置文件")提供了针对文件夹改变配置的方法. 即.在一个特定的文档文件夹中放置一个包括一个或多个指令的文件, 以作用于此文件夹及其所有子文件夹. ...

  9. Hadoop2.6.0配置參数查看小工具

    前言 使用Hadoop进行离线分析或者数据挖掘的project师,常常会须要对Hadoop集群或者mapreduce作业进行性能调优. 或许你知道通过浏览器訪问http://master:18088/ ...

随机推荐

  1. [转]hive中自定义函数(UDAF)实现多行字符串拼接为一行

    函数如何使用: hive> desc concat_test;OKa       intb       string hive> select * from concat_test;OK1 ...

  2. Python中斐波那契数列的四种写法

    在这些时候,我可以附和着笑,项目经理是决不责备的.而且项目经理见了孔乙己,也每每这样问他,引人发笑.孔乙己自己知道不能和他们谈天,便只好向新人说话.有一回对我说道,“你学过数据结构吗?”我略略点一点头 ...

  3. tomcat 远程命令执行漏洞复现

    影响范围 Apache Tomcat 7.0.0 - 7.0.81 不受影响的版本 Apache Tomcat 8.x Apache Tomcat 9.x 漏洞分析 在Tomcat安装目录下的配置文件 ...

  4. [转]在MySQL中创建实现自增的序列(Sequence)的教程

    原文地址:https://www.jb51.net/article/76124.htm 项目应用中,曾有以下一个场景: 接口中要求发送一个int类型的流水号,由于多线程模式,如果用时间戳,可能会有重复 ...

  5. ResponderChain note

    http://ww3.sinaimg.cn/large/6b288462gw1evl4h40tfxj20sg0lc77k.jpg

  6. 【Android Studio】DDMS的模拟器控制(Emulator Control)不可用

    问题:Win10,Android Studio2.1.3中,创建了一个安卓手机模拟器,但是在DDMS中模拟器控制(Emulator Control)是灰色不可用的(比如想模拟来电和来短信).如下图: ...

  7. windows和linux文件的转换

    由于windows与unix系统的换行不一致,因此需要相互之前的格式转换 只需要在linux上执行 dos2unix filename 将windows下的文本文件转换成linux上可以浏览的文件 u ...

  8. jpegtran图片压缩工具

    首先下载  jpegtran  下载地址为  http://jpegclub.org/jpegtran.exe jpegtran -copy none -optimize -perfect aa.jp ...

  9. android开发(37) android使用android_serialport_api 操作串口,解决权限问题

    最近有个项目,要使用android设备操作串口的 斑马GK888T打印机,使用打印机打印二维码. 硬件设备连接方式: 安卓设备 通过 串口RS232 连接 斑马打印机的串口 那么就要解决:使用安卓设备 ...

  10. Java并发框架??AQS中断的支持

    线程的定义给我们提供了并发执行多个任务的方式,大多数情况下我们会让每个任务都自行执行结束,这样能保证事务的一致性,但是有时我们希望在任务执行中取消任务,使线程停止.在java中要让线程安全.快速.可靠 ...