@H_403_1@频繁产生归档日志处理报告
2017@H_403_1@年10@H_403_1@月27@H_403_1@日,客户数据库突然间频繁产生大量归档日志,导致数据库hang@H_403_1@住,影响现场生产!由于oracle@H_403_1@归档日志一般由dml@H_403_1@语句产生,所以增加太快应该是dml@H_403_1@太频繁。
@H_403_1@首先查询以下每小时连接日志切换频率的情况:
select to_char(first_time,'yyyy-mm-ddhh24') first_time,count(*)
from v$log_history
WHERE TO_CHAR(FIRST_TIME,'yyyymmdd')
group by to_char(first_time,'yyyy-mm-ddhh24') order by FIRST_TIME desc@H_403_1@;
@H_403_1@可以看到数据库每个小时切换的联机日志的次数达650@H_403_1@多次,每个连接日志大小是50M@H_403_1@,发生切换时会将联机日志写入归档日志,所以归档日志增加很快。一小时产生的归档日志高达30G@H_403_1@多。
@H_403_1@首先通过AWR@H_403_1@报告可以看到数据库的主要负载是产生大量的redo@H_403_1@日志:
@H_403_1@关键是要找到相应的sql@H_403_1@语句,来判断问题发生的情况。所以我们使用logminer@H_403_1@工具来分析相应的归档日志,来找到相应的sql@H_403_1@语句:
@H_403_1@路径查看语句:show parameter db_recovery@H_403_1@!
@H_403_1@在相应的目录下找到归档日志:
1@H_403_1@,使用脚本创建相关的包
@$ORACLE_HOME/rdbms/admin/dbmslm.sql
@$ORACLE_HOME/rdbms/admin/dbmslmd.sql;
@H_403_1@第一个脚本用来创建DBMS_LOGMNR@H_403_1@包,该包用来分析日志文件。
@H_403_1@第二个脚本用来创建DBMS_LOGMNR_D@H_403_1@包,该包用来创建数据字典文件。
exec sys.dbms_logmnr.add_logfile(logfilename=> '+recoverydata/orcl/adchivelog/2017_10_27/thread_2_seq_148046.384.958475205',options=> dbms_logmnr.new);
3.@H_403_1@使用本地的在线数据字典分析归档日志
exec sys.dbms_logmnr.start_logmnr(options=> sys.dbms_logmnr.dict_from_online_catalog);
4,@H_403_1@查询分析出来的归档日志内容,例如统计最大修改量的Schema
select seg_owner,count(*) fromv$logmnr_contents group by seg_owner;
select count(1),substr(sql_redo,1,30) fromv$logmnr_contents group by substr(sql_redo,30) order by count(1) desc ;
@H_403_1@通过上图可以看到数据库中大量的回滚操作,回滚一般是由于数据库DML@H_403_1@语句失败所致,所以再去查看trace@H_403_1@日志,发现数据库存在大量的报错信息!如下图所示:
ORA-1654: unable to extend indexMES.PK_BBM_TRACE_INFO by 128 in tablespace MESDB_BASE_DATA01
ORA-1654: unable to extend indexMES.PK_BBM_TRACE_INFO by 1024 in tablespace MESDB_BASE_DATA01
ORA-1654: unable to extend indexMES.PK_BBM_TRACE_INFO by 128 in tablespace MESDB_BASE_DATA01
ORA-1654: unable to extend indexMES.PK_BBM_TRACE_INFO by 1024 in tablespace MESDB_BASE_DATA01
ORA-1654: unable to extend indexMES.PK_BBM_TRACE_INFO by 128 in tablespace MESDB_BASE_DATA01
ORA-1654: unable to extend indexMES.PK_BBM_TRACE_INFO by 1024 in tablespace MESDB_BASE_DATA01
ORA-1654: unable to extend indexMES.PK_BBM_TRACE_INFO by 128 in tablespace MESDB_BASE_DATA01
ORA-1654: unable to extend indexMES.PK_BBM_TRACE_INFO by 1024 in tablespace MESDB_BASE_DATA01
@H_403_1@报错已经很清楚的说明,是由于在表空间中无法扩大索引所致!查询相应的表空间,发现表空间只有2G@H_403_1@大小,增加表空间到30G@H_403_1@,并设置表空间自动增长,最大无限大!
@H_403_1@更改完后再次查询联机日志切换频率如下所示: