数据库宕机cpu空闲内存交换频繁，请大家帮忙分析下，谢谢

repentance

系统环境：
aix 5300(26C56G)+oracle 10203 RAC（之前因为未知问题关掉了一个节点)

附件的压缩包里面有awr,alert和systemstate

[ 本帖最后由 repentance 于 2012-8-14 17:05 编辑 ]

ricky

能不能上传
/u01/oracle/app/oracle/admin/life590/bdump/life5901_diag_422074.trc
listener.log

repentance

life5901_diag_422074.trc这个文件不存在，挺奇怪的。

Maclean Liu(刘相兵

ksb_diagpid: diagnostic dump disabled by init.ora parameter
*** 2012-08-14 14:52:34.417
Waited for process J011 to initialize for 110 seconds
ksb_diagpid: diagnostic dump disabled by init.ora parameter
*** 2012-08-14 14:52:44.418
Waited for process J011 to initialize for 120 seconds
ksb_diagpid: diagnostic dump disabled by init.ora parameter
Killing process (ospid 2212642):  (reason=x4 error=0)
... and the process is still alive after kill!


似乎设置了参数 禁用diag dump

Maclean Liu(刘相兵

Hard parses:         129.18         1.13

每秒硬解析129次，还是比较高的

Event        Waits        Time(s)        Avg Wait(ms)        % Total Call Time        Wait Class
latch: library cache         693,519         156,502         226         48.5        Concurrency
latch free         429,848         94,889         221         29.4        Other
latch: shared pool         246,081         52,749         214         16.3        Concurrency
latch: session allocation         105,731         29,898         283         9.3        Other


主要等待都是解析等待

library cache latch主要体现在：

library cache        kgldti: 2child        0        141,831        19,299
library cache        kglpin        0        110,135        20,900
library cache        kgldte: child 0        0        47,770        193,300


shared pool发生过抖动：

shared        CCursor        404.43        362.37        -10.40
shared        KGH: NO ACCESS        2,694.92        2,121.10        -21.29
shared        PCursor        279.84        239.92        -14.27
shared        db_block_hash_buckets        180.00        180.00        0.00
shared        free memory        1,688.18        1,762.80        4.42
shared        gcs resources        530.49        530.49        0.00
shared        gcs shadows        334.16        334.16        0.00
shared        kglsim object batch                 96.18         
shared        library cache        271.80        256.20        -5.74
shared        sql area        2,616.62        2,613.60        -0.12

_ksb_disable_diagpid        TRUE

_ksb_disable_diagpid禁止了diag进程做systemstate dump,结果如4楼

Maclean Liu(刘相兵

就awr中的pga看， Begin-end期间pga似乎没有leak，也可能由于最后你kill了进程的结果


PGA Aggr Target Stats
B: Begin snap E: End snap (rows dentified with B or E contain data which is absolute i.e. not diffed over the interval)
Auto PGA Target - actual workarea memory target
W/A PGA Used - amount of memory used for all Workareas (manual + auto)
%PGA W/A Mem - percentage of PGA memory allocated to workareas
%Auto W/A Mem - percentage of workarea memory controlled by Auto Mem Mgmt
%Man W/A Mem - percentage of workarea memory under manual control
PGA Aggr Target(M)        Auto PGA Target(M)        PGA Mem Alloc(M)        W/A PGA Used(M)        %PGA W/A Mem        %Auto W/A Mem        %Man W/A Mem        Global Mem Bound(K)
B        6,144        3,667        3,354.04        20.85        0.62        100.00        0.00        629,140
E        6,144        4,563        2,300.25        8.16        0.35        100.00        0.00        629,140




action plan:

1. 提供oswatcher 历史信息
2. 提供 ADDM和 ASH