LogMiner是用于Oracle日志挖掘的利器。

百科解释：

LogMiner 是Oracle公司从产品8i以后提供的一个实际非常有用的分析工具，使用该工具可以轻松获得Oracle 重做日志文件（归档日志文件）中的具体内容，LogMiner分析工具实际上是由一组PL/SQL包和一些动态视图组成，它作为Oracle数据库的一部分来发布，是oracle公司提供的一个完全免费的工具。

本文主要演示LogMiner的使用，直观展示LogMiner的作用。

环境：Oracle 11.2.0.4 RAC

1.查询当前日志组
2.业务用户插入操作
3.归档日志切换
4.业务用户删除操作
5.归档日志切换
6.业务用户更新操作
7.归档日志切换
8.确认需要分析的日志
9.备份归档日志
10.使用LogMiner分析

1.查询当前日志组

使用sys用户查询Oracle数据库的当前日志组:

--1.current log

SQL> select * from v$log;

    GROUP#    THREAD#  SEQUENCE#      BYTES  BLOCKSIZE    MEMBERS ARC STATUS           FIRST_CHANGE# FIRST_TIME   NEXT_CHANGE# NEXT_TIME

---------- ---------- ---------- ---------- ---------- ---------- --- ---------------- ------------- ------------ ------------ ------------

         1          1         29   52428800        512          2 YES INACTIVE               1547838 25-JUN-17         1547840 25-JUN-17

         2          1         30   52428800        512          2 NO  CURRENT                1567897 27-JUN-17      2.8147E+14 27-JUN-17

         3          2         25   52428800        512          2 NO  CURRENT                1567902 27-JUN-17      2.8147E+14

         4          2         24   52428800        512          2 YES INACTIVE               1567900 27-JUN-17         1567902 27-JUN-17

这里当前日志（current）是：

thread 1 sequence 30

thread 2 sequence 25

2.业务用户插入操作

模拟业务用户jingyu插入T2表数据：

--2.业务用户插入操作

sqlplus jingyu/jingyu@jyzhao

SQL> select count(1) from t2;

  COUNT(1)

----------

         0

SQL> insert into t2  select rownum, rownum, rownum, dbms_random.string('b',50)  from dual  connect by level <= 100000  order by dbms_random.random;

commit;

100000 rows created.

SQL>

Commit complete.

SQL> select count(1) from t2;

  COUNT(1)

----------

    100000

3.归档日志切换

为了区分每个日志的不同操作，这里对数据库进行手工归档切换，模拟现实中实际的归档切换。

--3.模拟归档日志切换

SQL> alter system archive log current;

System altered.

SQL>  select * from v$log;

    GROUP#    THREAD#  SEQUENCE#      BYTES  BLOCKSIZE    MEMBERS ARC STATUS           FIRST_CHANGE# FIRST_TIME   NEXT_CHANGE# NEXT_TIME

---------- ---------- ---------- ---------- ---------- ---------- --- ---------------- ------------- ------------ ------------ ------------

         1          1         31   52428800        512          2 NO  CURRENT                1572517 27-JUN-17      2.8147E+14

         2          1         30   52428800        512          2 YES ACTIVE                 1567897 27-JUN-17         1572517 27-JUN-17

         3          2         25   52428800        512          2 YES ACTIVE                 1567902 27-JUN-17         1572521 27-JUN-17

         4          2         26   52428800        512          2 NO  CURRENT                1572521 27-JUN-17      2.8147E+14

4.业务用户删除操作

模拟业务用户jingyu删除T2表部分数据：

--4.业务用户删除操作

SQL> delete from t2 where id < 10000;

9999 rows deleted.

SQL> commit;

Commit complete.

SQL> select count(1) from t2;

  COUNT(1)

----------

     90001

5.归档日志切换

为了区分每个日志的不同操作，这里对数据库进行手工归档切换，模拟现实中实际的归档切换。

--5.模拟归档日志切换

SQL> alter system archive log current;

System altered.

SQL> select * from v$log;

    GROUP#    THREAD#  SEQUENCE#      BYTES  BLOCKSIZE    MEMBERS ARC STATUS           FIRST_CHANGE# FIRST_TIME   NEXT_CHANGE# NEXT_TIME

---------- ---------- ---------- ---------- ---------- ---------- --- ---------------- ------------- ------------ ------------ ------------

         1          1         31   52428800        512          2 YES ACTIVE                 1572517 27-JUN-17         1574293 27-JUN-17

         2          1         32   52428800        512          2 NO  CURRENT                1574293 27-JUN-17      2.8147E+14

         3          2         27   52428800        512          2 NO  CURRENT                1574296 27-JUN-17      2.8147E+14

         4          2         26   52428800        512          2 YES ACTIVE                 1572521 27-JUN-17         1574296 27-JUN-17

6.业务用户更新操作

模拟业务用户jingyu更新T2表部分数据：

--6.业务用户更新操作

SQL> update T2 SET contents = 'xxx' where id > 99998;

2 rows updated.

SQL> commit;

Commit complete.

7.归档日志切换

为了区分每个日志的不同操作，这里对数据库进行手工归档切换，模拟现实中实际的归档切换。

--7.模拟归档日志切换

SQL> alter system archive log current;

System altered.

SQL> select * from v$log;

    GROUP#    THREAD#  SEQUENCE#      BYTES  BLOCKSIZE    MEMBERS ARC STATUS           FIRST_CHANGE# FIRST_TIME   NEXT_CHANGE# NEXT_TIME

---------- ---------- ---------- ---------- ---------- ---------- --- ---------------- ------------- ------------ ------------ ------------

         1          1         33   52428800        512          2 NO  CURRENT                1575480 27-JUN-17      2.8147E+14

         2          1         32   52428800        512          2 YES ACTIVE                 1574293 27-JUN-17         1575480 27-JUN-17

         3          2         27   52428800        512          2 YES ACTIVE                 1574296 27-JUN-17         1575458 27-JUN-17

         4          2         28   52428800        512          2 NO  CURRENT                1575458 27-JUN-17      2.8147E+14

8.确认需要分析的日志

确认之后需要使用LogMiner分析的日志：

--8.确认需要分析的日志

thread# 1 sequence# 30

thread# 2 sequence# 25

这部分日志肯定是有记录插入操作

thread# 1 sequence# 31

thread# 2 sequence# 26

这部分日志肯定是有记录删除操作

thread# 1 sequence# 32

thread# 2 sequence# 27

这部分日志肯定是有记录更新操作

9.备份归档日志

将相关的归档都copy备份出来：

--9. 将相关的归档都copy备份出来

RUN {

allocate channel dev1 device type disk format '/tmp/backup/arc_%h_%e_%t';

backup as copy archivelog sequence 30 thread 1;

backup as copy archivelog sequence 31 thread 1;

backup as copy archivelog sequence 32 thread 1;

backup as copy archivelog sequence 25 thread 2;

backup as copy archivelog sequence 26 thread 2;

backup as copy archivelog sequence 27 thread 2;

release channel dev1;

}

备份出来的归档日志文件如下：

[oracle@jyrac1 backup]$ ls -lrth

total 17M

-rw-r----- 1 oracle asmadmin 2.3M Jun 27 21:50 arc_1_30_947800247

-rw-r----- 1 oracle asmadmin 591K Jun 27 21:50 arc_1_31_947800249

-rw-r----- 1 oracle asmadmin 143K Jun 27 21:50 arc_1_32_947800250

-rw-r----- 1 oracle asmadmin 9.5M Jun 27 21:50 arc_2_25_947800251

-rw-r----- 1 oracle asmadmin 3.6M Jun 27 21:50 arc_2_26_947800253

-rw-r----- 1 oracle asmadmin  77K Jun 27 21:50 arc_2_27_947800254

10.使用LogMiner分析

使用LogMiner分析归档日志：

--使用LogMiner分析归档日志

--应该有插入操作的日志

begin

	dbms_logmnr.add_logfile('/tmp/backup/arc_1_30_947800247');

	dbms_logmnr.add_logfile('/tmp/backup/arc_2_25_947800251');

	dbms_logmnr.start_logmnr(Options=>dbms_logmnr.dict_from_online_catalog);

end;

/

--应该有删除操作的日志

begin

   dbms_logmnr.add_logfile('/tmp/backup/arc_1_31_947800249');

   dbms_logmnr.add_logfile('/tmp/backup/arc_2_26_947800253');

   dbms_logmnr.start_logmnr(Options=>dbms_logmnr.dict_from_online_catalog);

end;

/

--应该有更新操作的日志

begin

   dbms_logmnr.add_logfile('/tmp/backup/arc_1_32_947800250');

   dbms_logmnr.add_logfile('/tmp/backup/arc_2_27_947800254');

   dbms_logmnr.start_logmnr(Options=>dbms_logmnr.dict_from_online_catalog);

end;

/

查询v$logmnr_contents

set lines 180 pages 500

col username format a8

col sql_redo format a50

select username,scn,timestamp,sql_redo from v$logmnr_contents where table_name='T2';

select username,scn,timestamp,sql_redo from v$logmnr_contents where username='JINGYU';

select username,scn,timestamp,sql_redo from v$logmnr_contents where sql_redo like '%JINGYU%';

select username,scn,timestamp,sql_redo from v$logmnr_contents where sql_redo like 'insert%JINGYU%';

select username,scn,timestamp,sql_redo from v$logmnr_contents where sql_redo like 'delete%JINGYU%';

select username,scn,timestamp,sql_redo from v$logmnr_contents where sql_redo like 'update%JINGYU%';

实验发现，以username为条件无法查询到相关记录，最终确认username都是unknown而不是真正执行语句的业务用户jingyu。

而挖掘出的日志sql_redo这个字段是完整的SQL，可以采用like的方式查询，比如我分析更新操作的日志，就可以得到下面这样的结果：

SQL> --应该有更新操作的日志

SQL> begin

  2     dbms_logmnr.add_logfile('/tmp/backup/arc_1_32_947800250');

  3     dbms_logmnr.add_logfile('/tmp/backup/arc_2_27_947800254');

  4     dbms_logmnr.start_logmnr(Options=>dbms_logmnr.dict_from_online_catalog);

  5  end;

  6  /

PL/SQL procedure successfully completed.

SQL> select count(1) from v$logmnr_contents;

  COUNT(1)

----------

       388

SQL> select username,scn,timestamp,sql_redo from v$logmnr_contents where username='JINGYU';

no rows selected

SQL> select username,scn,timestamp,sql_redo from v$logmnr_contents where sql_redo like '%JINGYU%';

USERNAME                              SCN TIMESTAMP

------------------------------ ---------- ------------

SQL_REDO

--------------------------------------------------------------------------------

UNKNOWN                           1575420 27-JUN-17

update "JINGYU"."T2" set "CONTENTS" = 'xxx' where "CONTENTS" = 'YSWGNNLCLMYWPSLQ

ETVLGQJRKQIEAMOEYUFNRUQULVFRVPEDRV' and ROWID = 'AAAVWVAAGAAAAHnABj';

UNKNOWN                           1575420 27-JUN-17

update "JINGYU"."T2" set "CONTENTS" = 'xxx' where "CONTENTS" = 'WHCWFOZVLJWHFWLJ

DNVSMQTORGJFFXYADIOJZWJCDDOYXAOQJG' and ROWID = 'AAAVWVAAGAAAAOYAAE';

SQL>

至此，LogMiner基本的操作实验已完成。

附：与LogMiner有关的一些操作命令参考：

conn / as sysdba

--安装LOGMINER

@$ORACLE_HOME/rdbms/admin/dbmslmd.sql;

@$ORACLE_HOME/rdbms/admin/dbmslm.sql;

@$ORACLE_HOME/rdbms/admin/dbmslms.sql;

@$ORACLE_HOME/rdbms/admin/prvtlm.plb;

--停止logmnr

exec dbms_logmnr.end_logmnr

--查询附加日志开启情况：

select supplemental_log_data_min, supplemental_log_data_pk, supplemental_log_data_ui from v$database;   

--开启附加日志

alter database add supplemental log data;

--取消补充日志

alter database drop supplemental log data (primary key) columns;

alter database drop supplemental log data (unique) columns;

alter database drop supplemental log data;

--最后一个即为新的归档

select name,dest_id,thread#,sequence# from v$archived_log;

最后确认如果开启了附加日志，username就可以捕获到正确的值：

SQL> set lines 180

SQL> /

    GROUP#    THREAD#  SEQUENCE#      BYTES  BLOCKSIZE    MEMBERS ARC STATUS           FIRST_CHANGE# FIRST_TIME   NEXT_CHANGE# NEXT_TIME

---------- ---------- ---------- ---------- ---------- ---------- --- ---------------- ------------- ------------ ------------ ------------

         1          1         35   52428800        512          2 YES INACTIVE               1590589 27-JUN-17         1591935 27-JUN-17

         2          1         36   52428800        512          2 NO  CURRENT                1591935 27-JUN-17      2.8147E+14

         3          2         29   52428800        512          2 YES INACTIVE               1590594 27-JUN-17         1591938 27-JUN-17

         4          2         30   52428800        512          2 NO  CURRENT                1591938 27-JUN-17      2.8147E+14

1,36

2,30

SQL> update t2 set contents =

  2  'aaa' where id = 44449;

1 row updated.

SQL> commit;

Commit complete.

RUN {

allocate channel dev1 device type disk format '/tmp/backup/arc_%h_%e_%t';

backup as copy archivelog sequence 36 thread 1;

backup as copy archivelog sequence 30 thread 2;

release channel dev1;

}

begin

	dbms_logmnr.add_logfile('/tmp/backup/arc_1_36_947808116');

	dbms_logmnr.add_logfile('/tmp/backup/arc_2_30_947808118');

	dbms_logmnr.start_logmnr(Options=>dbms_logmnr.dict_from_online_catalog);

end;

/

SQL> select username,scn,timestamp,sql_redo from v$logmnr_contents where username='JINGYU';

USERNAME                              SCN TIMESTAMP

------------------------------ ---------- ------------

SQL_REDO

------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------

JINGYU                            1593448 27-JUN-17

set transaction read write;

JINGYU                            1593448 27-JUN-17

update "JINGYU"."T2" set "CONTENTS" = 'aaa' where "CONTENTS" = 'WZTSQZWYOCNDFKSMNJQLOLFUBRDOHCBMKXBHAPJSHCMWBYZJVH' and ROWID = 'AAAVWVAAGAAAACLAAL';

JINGYU                            1593450 27-JUN-17

commit;

可以看到，开启了附加日志，就可以正常显示username的信息了。

LogMiner的使用的更多相关文章

使用logminer挖掘日志，分析历史操作系列一
===============STARTED==================================== 事件起因: 业务的人mail过来说是有张表记录的10K+的优惠码记录没了,要我们确 ...
Oracle【IT实验室】数据库备份与恢复之六：LogMiner
6.1 LogMiner 的用途 Oracle LogMiner 是Oracle公司从产品8i以后提供的一个实际非常有用的分析工具,使用该工具可以轻松获得 Oracle 重作日志文件(归档日志文件) ...
Oracle TDE的数据加密示例并用logminer验证加密效果
1.确认数据库版本 2创建密钥钱包 3创建加密列的表并初始值 4演示TDE的数据加密示例 5 logminer验证加密效果
利用logminer恢复delete误删除操作的数据
1环境准备日志挖掘可以基于日志.基于时间.基于SCN分析,这里我们将演示一个基于SCN的分析案例. 开启补充日志功能(必须开始,否则不能捕获DML操作日志): 创建一张livan表,往里面插入了14 ...
4、总结：基于Oracle Logminer数据同步
最近开发Oracle数据同步功能,做了些调研和验证,这个工作过去有段时间,怕时间长了忘记,故用博客共享出来.在这系列中共写了三篇文章,第一篇是写LogMiner配置及使用,第二篇是测试了LogMine ...
3、使用Oracle Logminer同步Demo
使用Oracle Logminer同步Demo 1 Demo介绍 1.1 Demo设想前面介绍了Oracle LogMiner配置使用以及使用LogMiner进行解析日志文件性能,在这篇文章中将利用 ...
2、Oracle Logminer性能测试
Oracle Logminer性能测试 1 测试介绍 1.1 测试目的通过模拟不同环境下LogMiner解析联机/归档日志文件运行情况,通过测试所获取的数据分析,通过对以下两点的验证来确定通过Log ...
1、图解Oracle Logminer配置使用
LogMiner配置使用手册 1 Logminer简介 1.1 LogMiner介绍 Oracle LogMiner 是Oracle公司从产品8i以后提供的一个实际非常有用的分析工具,使用该工具可以轻 ...
亲测 logminer挖掘
LogMiner两种使用类型,一种是使用源数据库的数据字典分析DML操作,别一种是摘取LogMiner数据字典到字典文件分析DDL操作.检查下suppplemental logging:SQL> ...
DBA_Oracle LogMiner分析重做和归档日志（案例）
2014-08-19 Created By BaoXinjian

随机推荐

javascript的面向对象详解
每次说到javascript到面向对象,总感觉自己心里懂,但是却不知道该怎么说,这就是似懂非懂到表现,于是乎,每次一说,就要到处去查找资料,零零碎碎到看了一些,感觉有懂了,但是过段时间,好像又不知道是 ...
洛谷【P2393】题解
P2393 [yyy loves Maths II] 原题链接话说,这题其实方法对了,也蛮水的. 首先方法是一样的,直接扩大忽略精度问题. 其次,我用了c++的函数控制输出小数位数,方法:cout& ...
YAHOO 34 条前端优化建议
雅虎团队经验:网站页面性能优化的34条黄金守则 1.尽量减少HTTP请求次数终端用户响应的时间中,有80%用于下载各项内容.这部分时间包括下载页面中的图像.样式表.脚本.Flash等.通 ...
JavaScript中的DOM函数与关键字汇总
DOM节点的属性属性描述 attributes数组获取某个节点的所有属性子节点(实际是一个NodeList对象) childNodes数组获取某个节点的所有子节点,可以按数组方式访问子节 ...
[ERR] Node 172.168.63.202:7001 is not empty. Either the nodealready knows other nodes (check with CLUSTER NODES) or contains some
关于启动redis集群时: [ERR] Node 172.168.63.202:7001 is not empty. Either the nodealready knows other nodes ...
Java Swing 图形界面实现验证码（验证码可动态刷新）
import java.awt.Color;import java.awt.Font;import java.awt.Graphics;import java.awt.Toolkit;import j ...
Python 基础之基本数据类型
首先,Python中的变量不需要声明.每个变量在使用前都必须赋值,变量赋值以后该变量才会被创建.在Python中,变量就是变量,它没有类型,我们所说的"类型"是变量所指的内存中对象 ...
个人对于epollhup的理解
1.原因由于最近对于异步connect函数的测试,发现提前将一个套接字加入epoll监听队列会不断爆出epollhup事件 2.示例 ........ iEpoll = epoll_create( ...
ng-option
select 是 AngularJS 预设的一组directive.下面是其官网api doc给出的用法:AngularJS:select 大意是,select中的ngOption可以采用和ngRep ...
基于python的爬虫（一）
抓取网页 python核心库 urllib2 实现对静态网页的抓取,不得不说,"人生苦短,我用python"这句话还是有道理的,要是用java来写,这估计得20行代码 (对不住了博 ...

LogMiner的使用

1.查询当前日志组

2.业务用户插入操作

3.归档日志切换

4.业务用户删除操作

5.归档日志切换

6.业务用户更新操作

7.归档日志切换

8.确认需要分析的日志

9.备份归档日志

10.使用LogMiner分析

LogMiner的使用的更多相关文章

随机推荐

热门专题