当前位置: 首页 > 编程日记 > 正文

利用Oracle GoldenGate记录源系统所有表的操作

通过goldengate,可以实现目标表和源表不同结构之间的实时复制,包括记录源系统所有表的变更操作,供ETL或其它审计系统使用。
记录信息包括表名、操作时间、操作SCN,事务标记,操作类型到一个流水表。用于后续ETL处理过程中的按序处理。

创建日志记录表

create table odi.odi_trans (

id int primary key,
tb_name varchar(100),
commit_tm timestamp,
op_type varchar(50),                               
tran_ind varchar(100),
tran_csn varchar(100),
insert_tm timestamp,
flag smallint default 0,
proc_tm timestamp
);


创建序列
CREATE SEQUENCE odi.seq_odi_tran
     INCREMENT BY 1  -- 每次加几个 
     START WITH 1    -- 从1开始计数 
     NOMAXVALUE      -- 不设置最大值 
     NOCYCLE         -- 一直累加,不循环 
     CACHE 10;

创建OGG的投递进程,此进程与其它投递进程无关;即正常表的复制可以使用另外的进程处理。
投递进程参数配置

REPLICAT reall
userid goldengate, password goldengate
ASSUMETARGETDEFS
DISCARDFILE ./dirrpt/REPall.DSC, append

eofdelay 5

insertAllRecords
map dts.*, target odi.odi_trans,
   sqlexec(id odiseq, query "select odi.seq_odi_tran.nextval val from dual"),
   colmap(id=odiseq.val,
   tb_name=@Getenv('ggheader','tablename'),
   commit_tm=@getenv('GGHEADER','committimestamp'),
   op_type=@getenv('GGHEADER','optype'),
   insert_tm=@datenow(),
   tran_ind=@getenv('GGHEADER','TRANSACTIONINDICATOR'),
   tran_csn=@getenv('TRANSACTION','CSN')), keycols(tb_name,tran_csn)

GGSCI>add rep reall, exttrail ./dirdat/ea

以下是捕获之后的示例数据:

image

相关文章:

dis的前缀单词有哪些_玩转英语词汇--词汇积累策略之前缀dis

拇指英语说,分享英语学习心得,技巧和方法。让英语学习变得更有趣,更简单。在英语学习中,词汇量的大小是衡量英语水平的重要标志。通常词汇量越大,运用英语的能力就越强,反之亦然。许多英语偏弱的学生将词汇…

Centos7.x系统配置上的变化【转】

安装CentOS 7后,一开始有点儿无力吐槽的感觉,变化这么大? 一:Runlevel 二:Services 三:网络 四:ip ss指令替代 ifconfig route arp netstat 五:nmtui配置基本网络连接 六&#xff1a…

C++自动生成的成员函数

每个类都有构造函数和析构函数。如果程序员没有编写这些成员函数,C将自动生成他们。 1、class::class() 默认的构造函数。 如果没有定义其它的构造函数就会自动生成。生成的代码使用随机值填充类的数据成员。 当类的变量不带参数时就会被自动调用,如&…

【组队学习】【29期】7. 集成学习(上)

7. 集成学习(上) 航路开辟者:李祖贤、薛传雨、六一、杨毅远、陈琰钰领航员:刘思含航海士:李祖贤 基本信息 开源内容:https://github.com/datawhalechina/ensemble-learning开源内容:https://…

shell中竖线的作用_如何在 Linux 中安装、配置和使用 Fish Shell?

每个 Linux 管理员都可能听到过 shell 这个词。你知道什么是 shell 吗? 你知道 shell 在 Linux 中的作用是什么吗? Linux 中有多少个 shell 可用?-- Magesh Maruthamuthu每个 Linux 管理员都可能听到过 shell 这个词。你知道什么是 shell 吗? 你知道 s…

Android APK加壳技术方案----代码实现

本文章由Jack_Jia编写,转载请注明出处。 文章链接:http://blog.csdn.net/jiazhijun/article/details/8746917 作者:Jack_Jia 邮箱: 309zhijun163.com 一、序言 在上篇“Android APK加壳技术方案”(http://blog.cs…

【组队学习】【29期】9. 基于transformers的自然语言处理(NLP)入门

9. 基于transformers的自然语言处理(NLP)入门 航路开辟者:多多、erenup、张帆、张贤、李泺秋、蔡杰、hlzhang领航员:张红旭、袁一涵航海士:多多、张红旭、袁一涵、童鸣 基本信息 开源内容:https://github.com/datawhalechina/L…

golang xml和json的解析与生成

golang中解析xml时我们通常会创建与之对应的结构体,一层层嵌套,完成复杂的xml解析。 package main;import ("encoding/xml""fmt" )//我们通过定义一个结构体,来解析xml //注意,结构体中的字段必须是可导出的 …

mongodb 索引去重_朋友问你 MongoDB 是什么?给他看这篇就好了

点击▲关注 “ITPUB” 给公众号标星置顶更多精彩 第一时间直达来源:hello_锦泰blog.csdn.net/hayre/article/details/80628431总结的目的在于回顾MongoDB的相关知识点,明确MongoDB在企业级应用中充当的角色,为之后的技术选型提供一个可查阅…

Win32 API消息函数:GetMessagePos

函数功能:该函数返回表示屏幕坐标下光标位置的长整数值。此位置表示当上一消息由GetMessage取得时鼠标占用的点。 函数原型:DWORD GetMessagePos(VOID) 参数:无。 返回值:返回值给出光标位置的X&a…

【组队学习】【29期】11. 青少年编程(Scratch 二级)

11. 青少年编程(Scratch 二级) 航路开辟者:王思齐、马燕鹏领航员:马燕鹏航海士:王思齐、马燕鹏 基本信息 开源内容:https://github.com/datawhalechina/team-learning-program/tree/master/Scratch内容属…

TP基础问题第一天

1、入口文件中定义的内容&#xff0c;说出3点 1. 检测PHP环境 if(version_compare(PHP_VERSION,5.3.0,<)) die(require PHP > 5.3.0 !); 2. 开启调试模式 建议开发阶段开启 部署阶段注释或者设为false define(APP_DEBUG,True); 3. 定义应用目录 define(APP_P…

均值聚类散点图怎么画_GraphPad Prism 绘图教程 | 手把手教你绘制Column散点图

散点图&#xff0c;最常见的散点图是数据在直角坐标系中的分布图&#xff0c;我们可以考察坐标点的分布&#xff0c;判断两变量之间是否存在某种关联或总结坐标点的分布模式和趋势等&#xff1b;此外&#xff0c;我们还会用到多组数据的散点图&#xff0c;那我们如何来操作呢&a…

lucene3.0范围查找TermRangeQuery

原文链接:http://www.wenhq.com/article/view_415.html欢迎转载,请注明出处:亲亲宝宝 lucene3.0范围查找TermRangeQuery 在lucene3.0中&#xff0c;范围查询也有很大的变化&#xff0c;RangeQuery已经不推荐使用&#xff0c;使用TermRangeQuery和NumericRangeQuery两个替代。Te…

开源大数据周刊-第11期

摘要&#xff1a;开源有四个阶段&#xff1a;拥抱开源、回馈开源、融合开源、回报开源阿里云E-Mapreduce动态E-Mapreduce团队1.3.3版本 (已经发布)商业化发布&#xff0c;用户无需申请即可使用E-MapReduce服务1.3.4版本 (正在研发)升级jdk到1.8升级Hadoop到2.7.2添加python2.7.…

【青少年编程】【四级】绘制花瓣

「青少年编程竞赛交流群」已成立&#xff08;适合6至18周岁的青少年&#xff09;&#xff0c;公众号后台回复【Scratch】或【Python】&#xff0c;即可进入。如果加入了之前的社群不需要重复加入。 我们将有关编程题目的教学视频已经发布到抖音号21252972100&#xff0c;小马老…

一加7t人脸识别_一加7T系列国行版开启预约 谷歌Pixel 4系列高清图曝光

据一加手机官方消息&#xff0c;一加7T系列国行版已经开启预约&#xff0c;全新系列将于10月15日正式发布。一加7T采用6.55英寸&#xff0c;分辨率为24001080的AMOLED显示屏&#xff0c;具有90Hz刷新率、峰值亮度为1000尼特和HDR10 &#xff0c;采用屏下指纹。硬件方面&#xf…

MS IME 2007输入法

CH到JP 快捷键 ALTShift A到あ 快捷键 ctrlcaps lock 切换到片假 快捷键 altcaps lock 切换回来 快捷键 shiftcaps lock比如我输あした。本来按空格该出现"明日"的汉字三个假名下面的横线要是分开的话,你按住"SHIFT""左右箭头…

Weex第一天:手势

实验特征 Weex封装原生触摸事件以提供手势系统。使用手势类似于在Weex中使用事件。只需on在节点上设置属性即可收听手势。 类型 目前&#xff0c;有四种类型的手势&#xff1a; Touch。当触摸点被放置&#xff0c;移动或从触摸表面移除时&#xff0c;触摸手势被触发。触摸手势是…

【青少年编程(第30周)】关于青少年编程能力等级测评的科普!

2021年09月12日&#xff08;周日&#xff09;晚20:00我们在青少年编程竞赛交流群开展了第三十次直播活动。我们直播活动的主要内容如下&#xff1a; 首先&#xff0c;我们奖励了上周测试超过60分的小朋友。 其次&#xff0c;我们一起分析了电子学会Scratch四级的考试要求&…

ansys大变形开关要不要打开_ANSYS不收敛问题的解决办法

笔者应聘时发现此公众号内容也备受同行专家认可&#xff0c;继续努力&#xff0c;再接再厉&#xff01;本文经验是基于仿真秀专家学者总结&#xff0c;在此感谢仿真秀的支持与鼓励。80%的线性不收敛都是因为接触问题&#xff01;&#xff01;&#xff01;一、材料问题的不收敛可…

JAVA环境变量的配置

右键计算机—>属性—>高级系统设置—>环境变量&#xff0c;在用户变量那里添加jdk文件夹中的bin文件夹的路径&#xff0c;如&#xff1a; 变量名&#xff1a;PATH 值&#xff1a;E:\Program Files (x86)\Java\jdk1.7.0_09\bin 如果只是做java程序编译那么就可以用了&a…

【青少年编程】【四级】从小到大排序

「青少年编程竞赛交流群」已成立&#xff08;适合6至18周岁的青少年&#xff09;&#xff0c;公众号后台回复【Scratch】或【Python】&#xff0c;即可进入。如果加入了之前的社群不需要重复加入。 微信后台回复“资料下载”可获取以往学习的材料&#xff08;视频、代码、文档&…

ulimit -n 修改

通过ulimit -n命令可以查看linux系统里打开文件描述符的最大值&#xff0c;一般缺省值是1024&#xff0c;对一台繁忙的服务器来说&#xff0c;这个值偏小&#xff0c;所以有必要重新设置linux系统里打开文件描述符的最大值。那么应该在哪里设置呢&#xff1f; 最正确的做法是在…

变频器参数设置_变频器接线和参数设置

工业上用的变频器&#xff0c;分为单相和三相两种&#xff0c;这个是从主回路供电的电压来区分的&#xff0c;三相就是主回路要接入RST三相380伏交流电&#xff0c;输出接UVW三相线给电机&#xff1b;而单相是主回路接入单相220伏LN交流电&#xff0c;输出同样接UVW三相线给电机…

【青少年编程】【二级】货运飞船

「青少年编程竞赛交流群」已成立&#xff08;适合6至18周岁的青少年&#xff09;&#xff0c;公众号后台回复【Scratch】或【Python】&#xff0c;即可进入。如果加入了之前的社群不需要重复加入。 我们将有关编程题目的教学视频已经发布到抖音号21252972100&#xff0c;小马老…

JavaScript系统对象

1. 本地对象&#xff08;非静态对象&#xff09; 常用对象有&#xff1a;   Object、Function、Array、String、Boolean、Number、Date、RegExp、Error   注&#xff1a;本地对象需要new之后再使用。 2. 内置对象&#xff08;静态对象&#xff09; Global、Math   注&…

循环map_python函数 map函数—比for还好用的循环

描述&#xff1a;产生一个将 function 应用于迭代器中所有元素并返回结果的迭代器。如果传递了额外的 iterable 实参&#xff0c;function 必须接受相同个数的实参&#xff0c;并使用所有迭代器中并行获取的元素。当有多个迭代器时&#xff0c;最短的迭代器耗尽则整个迭代结束。…

30分钟掌握STL

三十分钟掌握STL STL概述 STL的一个重要特点是数据结构和算法的分离。尽管这是个简单的概念&#xff0c;但这种分离确实使得STL变得非常通用。例如&#xff0c;由于STL的sort()函数是完全通用的&#xff0c;你可以用它来操作几乎任何数据集合&#xff0c;包括链表&#xff0c;容…

JavaSE基础:Arrays工具类

Java工具类: Arrays Arrays类是数组的操作类,定义在java.util包中,主要功能是实现数组元素的查找/数组内容的充填/排序等功能 1.排序数组的sort方法 重点:对数组元素进行排序操作,默认由小到大排序. 该方法的参数不仅可以是基础数据类型的数组&#xff0c;也可以是对象引用的数…