安科网

如何利用DBMS_LOGMNR包挖掘在线日志

天涯刀客

天涯刀客

2015-01-11

关注 关注

今天实验内容是日志挖掘工具LOGMNR的使用，我的测试版本是10.2.0.1默认就自带了，无需另外安装。
如果未安装过提示无法使用这个dbms包，则可以用SYSDBA登陆，然后依次执行：
@$Oracle_HOME\rdbms\admin\dbmslm.sql;
@$ORACLE_HOME\rdbms\admin\dbmslmd.sql;
第一个脚本用来创建DBMS_LOGMNR包，该包用来分析日志文件。
第二个脚本用来创建DBMS_LOGMNR_D包，该包用来创建数据字典文件。

--开始实验

[oracle@ora10g ~]$ sqlplus / as sysdba

SQL*Plus: Release 10.2.0.1.0 - Production on 26 09:33:33 2014

Copyright (c) 1982, 2005, Oracle.  All rights reserved.

Connected to:
Oracle Database 10g Enterprise Edition Release 10.2.0.1.0 - Production
With the Partitioning, OLAP and Data Mining options


SQL> set line 130
SQL> select * from v$log;


    GROUP#    THREAD#  SEQUENCE#      BYTES    MEMBERS ARC STATUS          FIRST_CHANGE# FIRST_TIME
---------- ---------- ---------- ---------- ---------- --- ---------------- ------------- ----------
        1          1          8  52428800          1 YES INACTIVE              1402743 2014-12-24
        2          1          9  52428800          1 NO  CURRENT                1402823 2014-12-24
        3          1          7  52428800          1 YES INACTIVE              1401824 2014-12-24


SQL> col member for a45
SQL> select group#,member from v$logfile;


    GROUP# MEMBER
---------- ---------------------------------------------
        3 /u01/app/oracle/oradata/ora10g/redo03.log
        2 /u01/app/oracle/oradata/ora10g/redo02.log
        1 /u01/app/oracle/oradata/ora10g/redo01.log


--启用日志挖掘


SQL> exec dbms_logmnr.add_logfile('/u01/app/oracle/oradata/ora10g/redo02.log');


PL/SQL procedure successfully completed.


SQL> exec dbms_logmnr.start_logmnr(options=>dbms_logmnr.dict_from_online_catalog);


PL/SQL procedure successfully completed.


来看一下LOGMNR工具用到的相关视图:
 
SQL> set pages 100
SQL> col comments for a40
SQL> select * from dict t where t.table_name like '%LOGMNR%';


TABLE_NAME                    COMMENTS
------------------------------ ----------------------------------------
DBA_LOGMNR_LOG
DBA_LOGMNR_SESSION
DBA_LOGMNR_PURGED_LOG
V$LOGMNR_CONTENTS              Synonym for V_$LOGMNR_CONTENTS
V$LOGMNR_PARAMETERS            Synonym for V_$LOGMNR_PARAMETERS
V$LOGMNR_DICTIONARY            Synonym for V_$LOGMNR_DICTIONARY
V$LOGMNR_LOGS                  Synonym for V_$LOGMNR_LOGS
V$LOGMNR_STATS                Synonym for V_$LOGMNR_STATS
V$LOGMNR_DICTIONARY_LOAD      Synonym for V_$LOGMNR_DICTIONARY_LOAD
GV$LOGMNR_CONTENTS            Synonym for GV_$LOGMNR_CONTENTS
GV$LOGMNR_PARAMETERS          Synonym for GV_$LOGMNR_PARAMETERS
GV$LOGMNR_DICTIONARY          Synonym for GV_$LOGMNR_DICTIONARY
GV$LOGMNR_LOGS                Synonym for GV_$LOGMNR_LOGS
V$LOGMNR_LOGFILE              Synonym for V_$LOGMNR_LOGFILE
V$LOGMNR_PROCESS              Synonym for V_$LOGMNR_PROCESS
V$LOGMNR_LATCH                Synonym for V_$LOGMNR_LATCH
V$LOGMNR_TRANSACTION          Synonym for V_$LOGMNR_TRANSACTION
V$LOGMNR_REGION                Synonym for V_$LOGMNR_REGION
V$LOGMNR_CALLBACK              Synonym for V_$LOGMNR_CALLBACK
V$LOGMNR_SESSION              Synonym for V_$LOGMNR_SESSION
GV$LOGMNR_LOGFILE              Synonym for GV_$LOGMNR_LOGFILE
GV$LOGMNR_PROCESS              Synonym for GV_$LOGMNR_PROCESS
GV$LOGMNR_LATCH                Synonym for GV_$LOGMNR_LATCH
GV$LOGMNR_TRANSACTION          Synonym for GV_$LOGMNR_TRANSACTION
GV$LOGMNR_REGION              Synonym for GV_$LOGMNR_REGION
GV$LOGMNR_CALLBACK            Synonym for GV_$LOGMNR_CALLBACK
GV$LOGMNR_SESSION              Synonym for GV_$LOGMNR_SESSION
GV$LOGMNR_STATS                Synonym for GV_$LOGMNR_STATS
GV$LOGMNR_DICTIONARY_LOAD      Synonym for GV_$LOGMNR_DICTIONARY_LOAD


29 rows selected.


这里主要用到的是v$logmnr_contents这个视图，里面存放里挖掘日志获得的内容，来看一下表结构:


SQL> desc v$logmnr_contents;
 Name                                                                    Null?    Type
 ----------------------------------------------------------------------- -------- ------------------------------------------------
 SCN                                                                              NUMBER
 CSCN                                                                            NUMBER
 TIMESTAMP                                                                        DATE
 COMMIT_TIMESTAMP                                                                DATE
 THREAD#                                                                          NUMBER
 LOG_ID                                                                          NUMBER
 XIDUSN                                                                          NUMBER
 XIDSLT                                                                          NUMBER
 XIDSQN                                                                          NUMBER
 PXIDUSN                                                                          NUMBER
 PXIDSLT                                                                          NUMBER
 PXIDSQN                                                                          NUMBER
 RBASQN                                                                          NUMBER
 RBABLK                                                                          NUMBER
 RBABYTE                                                                          NUMBER
 UBAFIL                                                                          NUMBER
 UBABLK                                                                          NUMBER
 UBAREC                                                                          NUMBER
 UBASQN                                                                          NUMBER
 ABS_FILE#                                                                        NUMBER
 REL_FILE#                                                                        NUMBER
 DATA_BLK#                                                                        NUMBER
 DATA_OBJ#                                                                        NUMBER
 DATA_OBJD#                                                                      NUMBER
 SEG_OWNER                                                                        VARCHAR2(32)
 SEG_NAME                                                                        VARCHAR2(256)
 TABLE_NAME                                                                      VARCHAR2(32)
 SEG_TYPE                                                                        NUMBER
 SEG_TYPE_NAME                                                                    VARCHAR2(32)
 TABLE_SPACE                                                                      VARCHAR2(32)
 ROW_ID                                                                          VARCHAR2(18)
 SESSION#                                                                        NUMBER
 SERIAL#                                                                          NUMBER
 USERNAME                                                                        VARCHAR2(30)
 SESSION_INFO                                                                    VARCHAR2(4000)
 TX_NAME                                                                          VARCHAR2(256)
 ROLLBACK                                                                        NUMBER
 OPERATION                                                                        VARCHAR2(32)
 OPERATION_CODE                                                                  NUMBER
 SQL_REDO                                                                        VARCHAR2(4000)
 SQL_UNDO                                                                        VARCHAR2(4000)
 RS_ID                                                                            VARCHAR2(32)
 SEQUENCE#                                                                        NUMBER
 SSN                                                                              NUMBER
 CSF                                                                              NUMBER
 INFO                                                                            VARCHAR2(32)
 STATUS                                                                          NUMBER
 REDO_VALUE                                                                      NUMBER
 UNDO_VALUE                                                                      NUMBER
 SQL_COLUMN_TYPE                                                                  VARCHAR2(30)
 SQL_COLUMN_NAME                                                                  VARCHAR2(30)
 REDO_LENGTH                                                                      NUMBER
 REDO_OFFSET                                                                      NUMBER
 UNDO_LENGTH                                                                      NUMBER
 UNDO_OFFSET                                                                      NUMBER
 DATA_OBJV#                                                                      NUMBER
 SAFE_RESUME_SCN                                                                  NUMBER
 XID                                                                              RAW(8)
 PXID                                                                            RAW(8)
 AUDIT_SESSIONID                                                                  NUMBER


--通过抓取关键字"create"，来获得刚才的建表语句


SQL> select scn,timestamp,log_id,seg_owner,seg_type,table_space,data_blk#,data_obj#,data_objd#,session#,serial#,username,session_info,sql_redo,sql_undo 
2 from v$logmnr_contents t
3 where t.sql_redo like 'create%';

 


      SCN TIMESTAMP      LOG_ID SEG_OWNER                          SEG_TYPE TABLE_SPACE                      DATA_BLK#
---------- ---------- ---------- -------------------------------- ---------- -------------------------------- ----------
 DATA_OBJ# DATA_OBJD#  SESSION#    SERIAL# USERNAME
---------- ---------- ---------- ---------- ------------------------------
SESSION_INFO
----------------------------------------------------------------------------------------------------------------------------------
SQL_REDO
----------------------------------------------------------------------------------------------------------------------------------
SQL_UNDO
----------------------------------------------------------------------------------------------------------------------------------
  1404138 2014-12-26          9 ZLM                                      2                                        0
    53863          0          0          0


create table zlm.t1 as select * from dba_objects;


可以看到，刚才的DDL建表语句已经被记录到v$logmnr_contents表中了


--结束日志挖掘


SQL> exec dbms_logmnr.end_logmnr;


PL/SQL procedure successfully completed.


一旦结束日志挖掘后，就无法再对v$logmgr_contents视图进行查询，会报错：


SQL> select scn,timestamp,log_id,seg_owner,seg_type,table_space,data_blk#,data_obj#,data_objd#,session#,serial#,username,session_info,sql_redo,sql_undo 
2  from v$logmnr_contents t
3  where t.sql_redo like 'create%';
from v$logmnr_contents t
    *
ERROR at line 2:
ORA-01306: dbms_logmnr.start_logmnr() must be invoked before selecting from v$logmnr_contents


并且要重新指定挖掘的日志对象，否则依然报错：


SQL> exec dbms_logmnr.start_logmnr(options=>dbms_logmnr.dict_from_online_catalog);
BEGIN dbms_logmnr.start_logmnr(options=>dbms_logmnr.dict_from_online_catalog); END;


*
ERROR at line 1:
ORA-01292: no log file has been specified for the current LogMiner session
ORA-06512: at "SYS.DBMS_LOGMNR", line 58
ORA-06512: at line 1


SQL> create table zlm.t2 as select * from zlm.t1;
create table zlm.t2 as select * from zlm.t1
                                        *
ERROR at line 1:
ORA-01652: unable to extend temp segment by 128 in tablespace WEB


由于之前zlm用户给的默认表空间WEB空间比较小，只有10M，因此报空间不足了


SQL> select d.file#,d.ts#,d.bytes/1024/1024 as "Size(M)",t.name from v$datafile d,v$tablespace t where d.ts#=t.ts#;


    FILE#        TS#    Size(M) NAME
---------- ---------- ---------- ---------------------------------------------
        1          0        560 SYSTEM
        2          1        165 UNDOTBS1
        3          2        270 SYSAUX
        4          4        40 USERS
        5          6        100 EXAMPLE
        6          7        50 ZLM
        7        18        20 INDX2
        8        19        10 WEB


8 rows selected.


--修改zlm缺省表空间为zlm


SQL> alter user zlm default tablespace zlm;


User altered.


SQL> create table zlm.t2 as select * from zlm.t1;


Table created.


SQL> select * from v$log;


    GROUP#    THREAD#  SEQUENCE#      BYTES    MEMBERS ARC STATUS          FIRST_CHANGE# FIRST_TIME
---------- ---------- ---------- ---------- ---------- --- ---------------- ------------- ----------
        1          1        11  52428800          1 NO  CURRENT                1405472 2014-12-26
        2          1          9  52428800          1 YES INACTIVE              1402823 2014-12-24
        3          1        10  52428800          1 YES INACTIVE              1405357 2014-12-26


由于之前创建t1表的操作会产生一定的redo,并且是一个DDL操作，会自动commit，当前日志已经切换到group 1了
 
SQL> select scn,timestamp,log_id,seg_owner,seg_type,table_space,data_blk#,data_obj#,data_objd#,session#,serial#,username,session_info,sql_redo,sql_undo 
2 from v$logmnr_contents t
3 where t.sql_redo like 'create%';


      SCN TIMESTAMP      LOG_ID SEG_OWNER                          SEG_TYPE TABLE_SPACE                      DATA_BLK#
---------- ---------- ---------- -------------------------------- ---------- -------------------------------- ----------
 DATA_OBJ# DATA_OBJD#  SESSION#    SERIAL# USERNAME
---------- ---------- ---------- ---------- ------------------------------
SESSION_INFO
----------------------------------------------------------------------------------------------------------------------------------
SQL_REDO
----------------------------------------------------------------------------------------------------------------------------------
SQL_UNDO
----------------------------------------------------------------------------------------------------------------------------------
  1404138 2014-12-26          9 ZLM                                      2                                        0
    53863          0          0          0


create table zlm.t1 as select * from dba_objects;


既然当前日志是group 1的日志文件，而之前挖掘对象是group 2的日志文件，所以查询v$logmgr_contetns视图发现，第2条建表语句并没有被记录下来


--重新对group 1的redo01.log日志进行挖掘


SQL> exec dbms_logmnr.add_logfile('/u01/app/oracle/oradata/ora10g/redo01.log');


PL/SQL procedure successfully completed.


SQL> exec dbms_logmnr.start_logmnr(options=>dbms_logmnr.dict_from_online_catalog);


PL/SQL procedure successfully completed.


--查看LOGMNR内容表


SQL> select scn,timestamp,log_id,seg_owner,seg_type,table_space,data_blk#,data_obj#,data_objd#,session#,serial#,username,session_info,sql_redo,sql_undo 
2 from v$logmnr_contents t
3  where t.sql_redo like 'create%';


      SCN TIMESTAMP      LOG_ID SEG_OWNER                          SEG_TYPE TABLE_SPACE                      DATA_BLK#
---------- ---------- ---------- -------------------------------- ---------- -------------------------------- ----------
 DATA_OBJ# DATA_OBJD#  SESSION#    SERIAL# USERNAME
---------- ---------- ---------- ---------- ------------------------------
SESSION_INFO
----------------------------------------------------------------------------------------------------------------------------------
SQL_REDO
----------------------------------------------------------------------------------------------------------------------------------
SQL_UNDO
----------------------------------------------------------------------------------------------------------------------------------
  1404138 2014-12-26          9 ZLM                                      2                                        0
    53863          0          0          0


create table zlm.t1 as select * from dba_objects;

 


  1406186 2014-12-26        11 ZLM                                      2                                        0
    53864          0          0          0


create table zlm.t2 as select * from zlm.t1;

 


  1406401 2014-12-26        11 ZLM                                      2                                        0
    53865          0          0          0


create table zlm.t2 as select * from zlm.t1;

对redo01.log日志挖掘后，新的两条创建t2表的语句就被写入v$logmnr_contents中了，包括之前由于空间不足创建失败的那条语句，也做了记录，他们各自都有自己的scn号，不会互相冲突。注意，挖掘日志完毕以后，记得用exec dbms_logmnr.end_logmnr;关闭，否则会消耗数据库资源。

总结：

通过使用dbms_logmnr包，可以对在线日志进行挖掘，来获对数据库操作相关语句，对于审计也有一定的作用。高级用法还有很多，包括对归档日志的挖掘，对其他内容的挖掘等，这里只是做了一个简单的测试，觉得这个工具还是挺好用的。

oracle log

天涯刀客

天涯刀客

0 关注 0 粉丝 0 动态

关注 关注

相关推荐

关于使用PLSQL Developer时出现报错ora-12514的问题

　　在登陆PLSQL Developer时报ora-12513错误，需要修改本地数据库的监听配置文件，其过程相对简单。　　在Oracle安装目录中搜索找到listener.ora文件，并修改成txt格式后打开，需要添加的代码及添加位置如下图所示：。　　确认

lklong 2020-11-22

oracle锁表该如何解决

where l.object_id　=　o.object_id and l.session_id=s.sid;如果杀不掉可以加个 immediate 立即杀掉 试试；如果利用上面的命令杀死一个进程后，进程状态被置为"killed"，但是

oraclemch 2020-11-06

Oracle表字段有Oracle关键字出现异常解决方案

现在进行项目改造，数据库需要迁移，由原来的使用GBase数据库改为使用Oracle数据库，今天测试人员在测试时后台报了一个异常。把SQL语句单独复制出来进行查询，还是报错，仔细分析原因才知道是表中的字段使用了Oracle中的关键字size。一般来说建表的时

shilukun 2020-10-10

甲骨文推出Oracle Exadata云服务X8M

甲骨文推出Oracle Exadata云服务X8M，已可在Oracle云基础设施 上使用。企业可以通过26个全球云区域和Oracle专有云本地化解决方案，使用Oracle Exadata云服务X8M，加速运行具挑战性的事务处理和数据分析项目。无论是在云端还

周嘉笙 2020-11-09

Oracle云观测和管理平台正式推出

新的集成解决方案帮助企业在Oracle云基础设施、多云环境和本地部署的环境，都能获得更高水平的可见性和控制力。甲骨文公司宣布推出Oracle云观测和管理平台，提供一整套管理、诊断和分析服务，帮助客户消除和减少采用分散式管理多云和本地部署环境而产生的复杂性、

iilegend 2020-10-19

Oracle员工关怀工具包以三大重点帮助员工适应工作环境

随着全球疫情大流行,各行各业的经营型态都面临了许多新的冲击和挑战,随之而来的新常态也直接影响了员工的工作模式和心理健康,对个人绩效、团队效能和企业生产力都会产生深远的影响。在疫情带来的新常态之下,企业可先从HR和管理层带头,将员工的心理健康纳入企业的新思考

EricRay 2020-10-16

oracle备份之备份测试脚本的方法（冷备、热备、rman)

2、没有备份参数文件，参数文件可以另外备份，没有必要每次都备份，只需要在改变设置后备份一次。

warden00 2020-08-31

限制ip访问Oracle数据库的方法步骤

本次实验环境是Centos6.10 + Oracle 11.2.0.4单实例，数据库服务器ip地址为192.168.31.71. 这里需要注意的是必须把本机ip地址加进来，否则监听启动会报错。tcp.invited_nodes的意思是开通白名单，不在白名单

zhuzhufxz 2020-09-16

oracle merge into

可以参考SQL中Merge的用法，只不过sql server的merge语法多了个when not matched by source反向操作源表，该语法oracle似乎不支持。

dataminer 2020-08-17

Oracle和MySQL的数据导入为何差别这么大

经常会有一些朋友咨询我一些数据库的问题，我注意到一个很有意思的现象，凡是数据导入的问题，基本上都是Oracle类的，MySQL类的问题脑子里想了下竟然一次都没有。我们来梳理一下这个问题，分别从导出导入的方式来聊聊。导出有哪些工具呢，主要有exp，expdp

bfcady 2020-08-16

Oracle数据库的实例/表空间/用户/表之间关系简单讲解

完整的Oracle数据库通常由两部分组成：Oracle数据库和数据库实例。1) 数据库是一系列物理文件的集合；2) Oracle数据库实例则是一组Oracle后台进程/线程以及在服务器分配的共享内存区。Oracle有一个很大的内存快，成为全局区。Oracl

Hody 2020-08-16

浅谈入门级oracle数据库数据导入导出步骤

Oracle数据库是通过表空间来存储物理表的，一个数据库实例可以有N个表空间，一个表空间下可以有N张表。表空间是数据库的逻辑划分，每个数据库至少有一个表空间。

FightFourEggs 2020-08-16

oracle数据库的删除方法详解

使用DBCA进行删除的数据库必须处于OPEN状态，否则不能删除。到此这篇关于oracle数据库的删除方法详解的文章就介绍到这了,更多相关oracle数据库的删除方法内容请搜索安科网以前的文章或继续浏览下面的相关文章希望大家以后多多支持安科网！

数据库设计 2020-08-16

oracle 日期操作语句总结

SELECT TO_CHAR AS YEAR FROM DUAL--查询当前年份。SELECT TO_CHAR AS MONTH FROM DUAL--获取当前日期的'YYYY/MM/DD'格式：2020/01/02. SELECT TO_CHAR AS

Seandba 2020-08-16

oracle调试存储过程的过程详解

oracle如果存储过程比较复杂，我们要定位到错误就比较困难，那么可以存储过程的调试功能。先按简单的存储过程做个例子，就是上次做的存储过程

Omega 2020-08-16

Oracle如何使用PL/SQL调试存储过程

找到想要调试的存过，左键单击选中该存过，然后右键单击该存过，从弹出菜单中选择“Test”项。位置3的按钮才是关键――单步执行，就是让代码一行一行的执行，位置4的按钮是跳出单步执行，等待下一个指令。单步的执行时候把刚才那两个变量名填写到变量查看框，一边观察变

zjyzz 2020-08-16

Oracle通过LogMiner实现数据同步迁移

最近在研究如何实现Oracle数据库之间的数据同步，网上的资料确实比较少。最好用的Oracle数据库同步工具是：GoldenGate ，而GoldenGate是要收费的。那么还有什么好的办法来同步Oracle的数据吗？没错，就是使用LogMiner来实现O

yanghuatong 2020-08-16

CMD操作oracle数据导库过程图解

select 'alter table '||table_name||' allocate extent;' from user_tables where num_rows=0;

ktyl000 2020-08-16

ORACLE数据库中Rownum用法详解

ORACLE 中ROWNUM用法总结!对于 Oracle 的 rownum 问题，很多资料都说不支持>,>=,=,between...and，只能用以上符号(<、<=、!=)，并非说用>,& gt;=,=,betwee

dbasunny 2020-08-16

oracle数据库关于索引建立及使用的详细介绍

索引是与表相关的一个可选结构，在逻辑上和物理上都独立于表的数据，索引能优化查询，不能优化DML操作，Oracle自动维护索引，频繁的DML操作反而会引起大量的索引维护。如果该语句同时还要访问除索引列之外的列，那么，数据库会使用rowid来查找表中的行。通常

罗罗 2020-08-16
天涯刀客

天涯刀客

W3CSchool教程
HTML 教程
CSS 教程
Bootstrap 教程
Javascript 教程
jQuery 教程
后端教程
C 教程
Java 教程
PHP 教程
Python 教程
Go 教程
移动开发
Android 教程
Swift 教程
Kotlin 教程
jQuery Mobile 教程
ionic 教程
关于我们
新闻动态
联系方式
招聘英才
安科实验室
帮助与反馈

安科网(Ancii)，中国第一极客网

Copyright © 2013 - 2019 Ancii.com

京ICP备18063983号 京公网安备11010802014868号