用LogMiner
了解和使用Oracle 8i分析工具LogMiner
Oracle LogMiner 是Oracle公司從産品8i以後提供的一個實際非常有用的分析工具,使用該工具可以輕松獲得Oracle 重作日志檔案(歸檔日志檔案)中的具體内容,特别是,該工具可以分析出所有對于資料庫操作的DML(insert、update、delete等)語句,另外還可分析得到一些必要的復原SQL語句。該工具特别适用于調試、審計或者回退某個特定的事務。
LogMiner分析工具實際上是由一組PL/SQL包和一些動态視圖(Oracle8i内置包的一部分)組成,它作為Oracle資料庫的一部分來釋出,是8i産品提供的一個完全免費的工具。但該工具和其他Oracle内建工具相比使用起來顯得有些複雜,主要原因是該工具沒有提供任何的圖形使用者界面(GUI)。本文将詳細介紹如何安裝以及使用該工具。
一、LogMiner的用途
日志檔案中存放着所有進行資料庫恢複的資料,記錄了針對資料庫結構的每一個變化,也就是對資料庫操作的所有DML語句。
在Oracle 8i之前,Oracle沒有提供任何協助資料庫管理者來讀取和解釋重作日志檔案内容的工具。系統出現問題,對于一個普通的資料管理者來講,唯一可以作的工作就是将所有的log檔案打包,然後發給Oracle公司的技術支援,然後靜靜地等待Oracle 公司技術支援給我們最後的答案。然而從8i以後,Oracle提供了這樣一個強有力的工具-LogMiner。
LogMiner 工具即可以用來分析線上,也可以用來分析離線日志檔案,即可以分析本身自己資料庫的重作日志檔案,也可以用來分析其他資料庫的重作日志檔案。
總的說來,LogMiner工具的主要用途有:
1. 跟蹤資料庫的變化:可以離線的跟蹤資料庫的變化,而不會影響線上系統的性能。
2. 回退資料庫的變化:回退特定的變化資料,減少point-in-time recovery的執行。
3. 優化和擴容計劃:可通過分析日志檔案中的資料以分析資料增長模式。
二、安裝LogMiner
要安裝LogMiner工具,必須首先要運作下面這樣兩個腳本:
l $ORACLE_HOME/rdbms/admin/dbmslsm.sql
2 $ORACLE_HOME/rdbms/admin/dbmslsmd.sql.
這兩個腳本必須均以SYS使用者身份運作。其中第一個腳本用來建立DBMS_LOGMNR包,該包用來分析日志檔案。第二個腳本用來建立DBMS_LOGMNR_D包,該包用來建立資料字典檔案。
三、使用LogMiner工具
下面将詳細介紹如何使用LogMiner工具。
1、建立資料字典檔案(data-dictionary)
前面已經談到,LogMiner工具實際上是由兩個新的PL/SQL内建包((DBMS_LOGMNR 和 DBMS_ LOGMNR_D)和四個V$動态性能視圖(視圖是在利用過程DBMS_LOGMNR.START_LOGMNR啟動LogMiner時建立)組成。在使用LogMiner工具分析redo log檔案之前,可以使用DBMS_LOGMNR_D 包将資料字典導出為一個文本檔案。該字典檔案是可選的,但是如果沒有它,LogMiner解釋出來的語句中關于資料字典中的部分(如表名、列名等)和數值都将是16進制的形式,我們是無法直接了解的。例如,下面的sql語句:
INSERT INTO dm_dj_swry (rydm, rymc) VALUES (00005, '張三');
LogMiner解釋出來的結果将是下面這個樣子,
Insert into Object#308(col#1, col#2) values (hextoraw('c30rte567e436'), hextoraw('4a6f686e20446f65'));
建立資料字典的目的就是讓LogMiner引用涉及到内部資料字典中的部分時為他們實際的名字,而不是系統内部的16進制。資料字典檔案是一個文本檔案,使用包DBMS_LOGMNR_D來建立。如果我們要分析的資料庫中的表有變化,影響到庫的資料字典也發生變化,這時就需要重新建立該字典檔案。另外一種情況是在分析另外一個資料庫檔案的重作日志時,也必須要重新生成一遍被分析資料庫的資料字典檔案。
首先在init.ora初始化參數檔案中,指定資料字典檔案的位置,也就是添加一個參數UTL_FILE_DIR,該參數值為伺服器中放置資料字典檔案的目錄。如:
UTL_FILE_DIR = (e:\Oracle\logs)
重新啟動資料庫,使新加的參數生效,然後建立資料字典檔案:
SQL> CONNECT SYS
SQL> EXECUTE dbms_logmnr_d.build(
dictionary_filename => ' v816dict.ora',
dictionary_location => 'e:\oracle\logs');
2、建立要分析的日志檔案清單
Oracle的重作日志分為兩種,線上(online)和離線(offline)歸檔日志檔案,下面就分别來讨論這兩種不同日志檔案的清單建立。
(1)分析線上重作日志檔案
A. 建立清單
SQL> EXECUTE dbms_logmnr.add_logfile(
LogFileName=>' e:\Oracle\oradata\sxf\redo01.log',
Options=>dbms_logmnr.new);
B. 添加其他日志檔案到清單
LogFileName=>' e:\Oracle\oradata\sxf\redo02.log',
Options=>dbms_logmnr.addfile);
(2)分析離線日志檔案
A.建立清單
LogFileName=>' E:\Oracle\oradata\sxf\archive\ARCARC09108.001',
B.添加另外的日志檔案到清單
LogFileName=>' E:\Oracle\oradata\sxf\archive\ARCARC09109.001',
關于這個日志檔案清單中需要分析日志檔案的個數完全由你自己決定,但這裡建議最好是每次隻添加一個需要分析的日志檔案,在對該檔案分析完畢後,再添加另外的檔案。
和添加日志分析清單相對應,使用過程 'dbms_logmnr.removefile' 也可以從清單中移去一個日志檔案。下面的例子移去上面添加的日志檔案e:\Oracle\oradata\sxf\redo02.log。
Options=>dbms_logmnr. REMOVEFILE);
建立了要分析的日志檔案清單,下面就可以對其進行分析了。
3、使用LogMiner進行日志分析
(1)無限制條件
SQL> EXECUTE dbms_logmnr.start_logmnr(
DictFileName=>' e:\oracle\logs\ v816dict.ora ');
(2)有限制條件
通過對過程DBMS_ LOGMNR.START_LOGMNR中幾個不同參數的設定(參數含義見表1),可以縮小要分析日志檔案的範圍。通過設定起始時間和終止時間參數我們可以限制隻分析某一時間範圍的日志。如下面的例子,我們僅僅分析2001年9月18日的日志:
DictFileName => ' e:\oracle\logs\ v816dict.ora ',
StartTime => to_date('2001-9-18 00:00:00','YYYY-MM-DD HH24:MI:SS')
EndTime => to_date(''2001-9-18 23:59:59','YYYY-MM-DD HH24:MI:SS '));
也可以通過設定起始SCN和截至SCN來限制要分析日志的範圍:
StartScn => 20,
EndScn => 50);
表1 DBMS_LOGMNR.START__LOGMNR過程參數含義
參數 參數類型 預設值 含義
StartScn 數字型(Number) 0 分析重作日志中SCN≥StartScn日志檔案部分
EndScn 數字型(Number) 0 分析重作日志中SCN≤EndScn日志檔案部分
StartTime 日期型(Date) 1998-01-01 分析重作日志中時間戳≥StartTime的日志檔案部分
EndTime 日期型(Date) 2988-01-01 分析重作日志中時間戳≤EndTime的日志檔案部分
DictFileName 字元型(VARCHAR2) 字典檔案,該檔案包含一個資料庫目錄的快照。使用該檔案可以使得到的分析結果是可以了解的文本形式,而非系統内部的16進制
Options BINARY_INTEGER 0 系統調試參數,實際很少使用
參數 參數類型 預設值 含義
StartScn 數字型(Number) 0 分析重作日志中SCN≥StartScn日志檔案部分
EndScn 數字型(Number) 0 分析重作日志中SCN≤EndScn日志檔案部分
StartTime 日期型(Date) 1998-01-01 分析重作日志中時間戳≥StartTime的日志檔案部分
EndTime 日期型(Date) 2988-01-01 分析重作日志中時間戳≤EndTime的日志檔案部分
DictFileName 字元型(VARCHAR2) 字典檔案,該檔案包含一個資料庫目錄的快照。使用該檔案可以使得到的分析結果是可以了解的文本形式,而非系統内部的16進制
Options BINARY_INTEGER 0 系統調試參數,實際很少使用
4、觀察分析結果(v$logmnr_contents)
到現在為止,我們已經分析得到了重作日志檔案中的内容。動态性能視圖v$logmnr_contents包含LogMiner分析得到的所有的資訊。
SELECT sql_redo FROM v$logmnr_contents;
如果我們僅僅想知道某個使用者對于某張表的操作,可以通過下面的SQL查詢得到,該查詢可以得到使用者DB_ZGXT對表SB_DJJL所作的一切工作。
SQL> SELECT sql_redo FROM v$logmnr_contents WHERE username='DB_ZGXT' AND tablename='SB_DJJL';
需要強調一點的是,視圖v$logmnr_contents中的分析結果僅在我們運作過程'dbms_logmrn.start_logmnr'這個會話的生命期中存在。這是因為所有的LogMiner存儲都在PGA記憶體中,所有其他的程序是看不到它的,同時随着程序的結束,分析結果也随之消失。
最後,使用過程DBMS_LOGMNR.END_LOGMNR終止日志分析事務,此時PGA記憶體區域被清除,分析結果也随之不再存在。
小結:
EXECUTE dbms_logmnr_d.build('dictionary.ora','C:\oracle\oradata\logmnr',options => dbms_logmnr_d.store_in_flat_file);
EXECUTE dbms_logmnr.add_logfile(LogFileName=>'C:\oracle\oradata\mydb\redo01.log',Options=>dbms_logmnr.new);
EXECUTE dbms_logmnr.start_logmnr(DictFileName=>'C:\oracle\oradata\logmnr\dictionary.ora');
select operation,sql_redo,sql_undo from v$logmnr_contents WHERE username='SFC'
select dbms_flashback.get_system_change_number from dual; --scn
select count(*) from SFC.MES_ASSY_HISTORY as of scn 340707; --
--insert into sfc.mes_assy_history_recov select * from sfc.mes_assy_history as of scn 340707;
四、其他注意事項
們可以利用LogMiner日志分析工具來分析其他資料庫執行個體産生的重作日志檔案,而不僅僅用來分析本身安裝LogMiner的資料庫執行個體的redo logs檔案。使用LogMiner分析其他資料庫執行個體時,有幾點需要注意:
1. LogMiner必須使用被分析資料庫執行個體産生的字典檔案,而不是安裝LogMiner的資料庫産生的字典檔案,另外必須保證安裝LogMiner資料庫的字元集和被分析資料庫的字元集相同。
2. 被分析資料庫平台必須和目前LogMiner所在資料庫平台一樣,也就是說如果我們要分析的檔案是由運作在UNIX平台上的Oracle 8i産生的,那麼也必須在一個運作在UNIX平台上的Oracle執行個體上運作LogMiner,而不能在其他如Microsoft NT上運作LogMiner。當然兩者的硬體條件不一定要求完全一樣。
3. LogMiner日志分析工具僅能夠分析Oracle 8以後的産品,對于8以前的産品,該工具也無能為力。
五、結語
LogMiner對于資料庫管理者(DBA)來講是個功能非常強大的工具,也是在日常工作中經常要用到的一個工具,借助于該工具,可以得到大量的關于資料庫活動的資訊。其中一個最重要的用途就是不用全部恢複資料庫就可以恢複資料庫的某個變化。另外,該工具還可用來監視或者審計使用者的活動,如你可以利用LogMiner工具察看誰曾經修改了那些資料以及這些資料在修改前的狀态。我們也可以借助于該工具分析任何Oracle 8及其以後版本産生的重作日志檔案。另外該工具還有一個非常重要的特點就是可以分析其他資料庫的日志檔案。總之,該工具對于資料庫管理者來講,是一個非常有效的工具,深刻了解及熟練掌握該工具,對于每一個資料庫管理者的實際工作是非常有幫助的。