我们知道，用JAVA语言写的网站，都会有GC的机制，其中堆的大小，就是新生代空余内存及老年代的空余内存之和。java程序在运行的时候，他会不断把新生代里无法gc掉的对象丢到老年代里面，但是老年代的内存也是一个固定值的，当新生代的对象丢到老年代后，老年代的空余内存会不断缩小，也许大家会问，老年代不是也有GC么，他full gc后，老年代丢弃不用的对象后，使用内存不就是会减少了吗？ 说的很对，但是，full gc中，也会有gc不掉的对象，新生代丢给他10个，老年代gc掉8个，那么还剩下两个，无限循环下去，总有一天，老年代会满的。
当老年代内存占满后。Java就会不断的执行full gc, full gc会导致应用暂停，直接就导致网站打不开了，那么我们如何去监控它呢。让他的老年代的内存，达到总内存的80%之后。就发出告警。好通知 sa进行查看及清理。
下面有两种方法。
一，通过jstat查看gc状态
#jstat -gc 12580 1000 10000 如下图
这个图里面 133312000 就是年老代所有的内存，即OC列， OU列就是年老代目前所占用的内存，我们看到，每 YGC 一次，年老代的内存就会增加，
当然，我们不可能一直盯着这个界面，那么，下面我们就用一个脚本，来实现监控并抱紧。
二，通过脚本来监控FULL GC .
开启日志功能。
在JAVA的启动参数里面，增加 -Xloggc:/var/log/gc.log
例如：
我们先来看一段CMS gc所导出的日志
日志里面记录了YGC及FULL GC的所有状态。
我们需要取出哪些数据呢。
2
3
4
220167.488: [CMS-concurrent-reset: 0.009/0.009 secs] [Times: user=0.01 sys=0.00, real=0.01 secs]
320222.330: [GC 20222.330: [ParNew: 1029046K->15111K(1105920K), 0.0483250 secs] 1555881K->546542K(2437120K), 0.0485950 secs] [Times: user=0.29 sys=0.01, real=0.04 secs]
4
上面的数据是我复制的一份log日志。其中，我们要取出 15111K 及 546542K(红色标记)，即执行full gc后第一次YGC的值。 15111K 是新生代在gc后还占用的内存大小，546542K 是整个堆的大小，我们知道，堆就是JAVA运行所占用的内存总大小，包括新生代占用大小，和 老年代内存占用大小。如果要计算出老年代所占用的大小，就把 总的 减掉 新生代大小就可以。最后和总的进行比对。即下面的脚本:
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
2#! /bin/bash
3#script by yaozhibing
4#blog:http://www.yzbing.info/ ;http://yaozb.blog.51cto.com/
5#QQ:410018348
6datetime=`date -d today +"%Y-%m-%d %T"`
7pro="MIC_EN"
8network="TEL"
9localip=`ifconfig eth0|awk -F"[: ]+" '/inet /{print $4}'`
10gc_logpath="/var/log/gc.log"
11error="80"
12sms_file="/tmp/sms_file"
13time_file="/tmp/time_file"
14last=`cat $time_file||echo "111">$time_file`
15now=`awk -F: '/CMS-concurrent-reset-start/{print $1}' $gc_logpath|tail -1`
16if [ $now != $last ];then
17echo $now >$time_file
18total=`grep -oP '\d+(?=K\)\])' $gc_logpath|tail -1`
19use=`grep -A1 "CMS-concurrent-reset:" $gc_logpath|tail -1|awk -F'[\\\>K]' '{print $7-$3}'`
20ratio=`awk -v total=$total -v use=$use BEGIN'{print use/total*100}'`
21if [ $(echo "$ratio <= $error"|bc) -eq 0 ];then
22total_M=$(($total/1024))
23free=$((($total-$use)/1024))
24wget -O $sms_file http://短信接口/sms_send.php\?SMS_number=159XXXXX752\&SMS_content="$network:FULLGC ERROR on linux server $localip $pro (Total=$total_M M,Free=$free M,Use= $ratio%) $datetime"
25fi
26fi
27
并将些脚本添加到任务计划里面,每5分钟执行一次
2
3
2*/5 * * * * /bin/bash /job/check_gc.sh >/dev/null 2>&1
3
我们来对脚本进行简单的解释
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
2
3#! /bin/bash
4#script by yaozhibing
5#blog:http://www.yzbing.info/; http://yaozb.blog.51cto.com/
6#QQ:410018348
7
8datetime=`date -d today +"%Y-%m-%d %T"` #获取当前时间
9pro="yzbing.info" #项目名称
10network="TEL"
11localip=`ifconfig eth0|awk -F"[: ]+" '/inet /{print $4}'` #主机ip
12gc_logpath="/var/log/gc.log" #日志地址
13error="80" #报警阀值
14sms_file="/tmp/sms_file" #短信临时文件
15time_file="/tmp/time_file" #比对文件
16last=`cat $time_file||echo "111">$time_file` #读取这个文件内容，如果空的，先随便输一个值进去
17now=`awk -F: '/CMS-concurrent-reset-start/{print $1}' $gc_logpath|tail -1` #取日志最前面的值 列
1820167.488 ，这步主要是下一次和上一次进行比对，如果值是一样的，就不执行了，以免发生重复报警。
19if [ $now != $last ];then #判断两次值是否不相等，
20echo $now >$time_file #如果不相等的话，将这次的值输入临时文件
21total=`grep -oP '\d+(?=K\)\])' $gc_logpath|tail -1` #取年老代所设置的内存大小
22use=`grep -A1 "CMS-concurrent-reset:" $gc_logpath|tail -1|awk -F'[\\\>K]' '{print $7-$3}'` #取总内存占用大小，减新生代占用内存大小，即老年代的内存大小
2322
24ratio=`awk -v total=$total -v use=$use BEGIN'{print use/total*100}'` #将老年代的占用内存大小与，总年老代设置的总内存大小进行比对 并乘以100 取百分比。
25if [ $(echo "$ratio <= $error"|bc) -eq 0 ];then #拿百分比与告警阀值进行比对，看是否达到告警界限。
26total_M=$(($total/1024)) #年老代设置的内存大小除以1024，以M为单位
27free=$((($total-$use)/1024))#同上。
28wget -O $sms_file http://短信接口/sms_send.php\?SMS_number=159XXXXX752\&SMS_content="$network:FULLGC ERROR on linux server $localip $pro (Total=$total_M M,Free=$free M,Use= $ratio%) $datetime" #发送短信。当然也可以发送邮件报警。
29fi
30fi
31
