前言
记得刚来这家公司的时候,我部门就我一个运维工程师,然后就是经理,刚开始公司平台什么监控都没有,在我与经理的努力下,先搭建nagios+cacti监控平台,后来随着公司业务的增加,平台的功能与服务也不断的扩展,nagios+cacti监控不太适合平台的需要,为了解决此问题我就使用shell来搭建了脚本监控系统,根据平台的应用服务需求与领导要求,使用shell的脚本监控系统监控整个平台的运行情况,但随着公司业务的扩大,平台数量的增加,服务器的数量也随之增加,从以前的30台变为现在的120台左右,之前的shell脚本监控系统虽然能够顺利的监控平台的运行情况,但在日常服务器巡检的时候没有什么便利,我这里管理很严格,每天9、13、17都需要对平台进行一下巡检,服务器少的时候还好说,但120台巡检就是个噩梦,为了美好的生活,我决定使用自己设计一个新的监控系统,主要是能在服务器端,使用shell脚本监控继续的监控平台运气情况,使用mysql数据库记录监控数据,使用php设计一个web平台,能在web里展示这些服务器的监控数据,经过2个月的努力,我独自一人的完成了这项任务,经过3个月的试运行与生产环境的测试,成功的完成了我之前的需求,使我的时间变的更充裕,不必把时间浪费到日常巡检里,当然也有副作用,就是每天什么事都没有,实在太闲了(主要是我在搭建shell监控的时候,如果发现有服务宕掉,就根据错误代码自动的解决这个问题并重启服务,所以每天实在很闲)。
由于本监控系统我本人独立自主开发,所以具有决定本监控系统是否开源的权利,为了发展开源精神,我决定把本分布式监控系统open source,借此向开源致敬。其中php程序与shell脚本已经放到最后一页,也就是第七页,希望本文对各位如何的搭建分布式私有监控系统能有更多的启发,也希望各位同仁能多提意见,谢谢!
闲话不说,下面是我的“运维自动化之PHP+MYSQL+SHELL监控系统”的界面展示。
为了方便大家的理解,我画了一个php+mysql+shell的流程图
本监控系统的流程为(部署的顺序是从右到左):
1**、需要在各省的机房里的所有服务器安装
shell监控脚本,然后把监控服务与资源的数据写入到mysql数据库里;**
2**、
mysql收到各省服务器发送的监控数据,把他们按照先前定义的数据表分别的存储起来;**
3**、
php程序按照之前编辑好的显示方式,从mysql数据库里提前相应的数据,在web端显示,同时在部署php程序的images目录里,运行数据视图化脚本,生成各省监控的数据资源图;**
4**、用户可以通过
web来浏览监控服务与资源的数据、资源的监控数据图。**
由于本文文章与代码描述过多,所以分成7篇文章,下面是文章网页地图。
运维自动化之使用PHP+MYSQL+SHELL打造私有监控系统(一)
http://dl528888.blog.51cto.com/2382721/1034992
运维自动化之使用PHP+MYSQL+SHELL打造私有监控系统(二)
http://dl528888.blog.51cto.com/2382721/1035131
运维自动化之使用PHP+MYSQL+SHELL打造私有监控系统(三)
http://dl528888.blog.51cto.com/2382721/1035142
运维自动化之使用PHP+MYSQL+SHELL打造私有监控系统(四)
http://dl528888.blog.51cto.com/2382721/1035145
运维自动化之使用PHP+MYSQL+SHELL打造私有监控系统(五)
http://dl528888.blog.51cto.com/2382721/1035252
运维自动化之使用PHP+MYSQL+SHELL打造私有监控系统(六)
http://dl528888.blog.51cto.com/2382721/1035297
运维自动化之使用PHP+MYSQL+SHELL打造私有监控系统(七)
http://dl528888.blog.51cto.com/2382721/1035335
1**、先查看资产管理**
资产管理下面有
2个功能,一个是
新增的设备,一个是浏览设备
新增设备
可以增加以上的内容
浏览设备
可以展示之前添加的内容,是从数据库的
device表里获得数据
2**、监控详情**
此页面里展示了所以的监控省份
比如我监控的省份就有甘肃、天津、广西、贵州、海南、河北、湖南、青海、新疆、河南、西藏、包头、湖北、江西、宁夏、陕西工
16个省份,每个省份5台服务器,共计80个服务器,目前还在继续添加服务器,预计半个月后,监控的服务器会增加到105个。
下面我们以天津为例
A**、应用服务监控详情**
以上监控,显示的是应用服务的监控主要显示的内容是通过
shell脚本监控的,通过shell写入到mysql,然后php通过设置好的表单来进行展示来自mysql的数据。
B**、硬盘使用率监控详情**
C**、
cpu使用率监控详情**
D**、硬件信息错误监控详情**
E**、
I/O使用率监控详情**
F**、
15分钟内的负载**
G**、内存使用率监控详情**
H**、日志错误信息监控详情**
I**、用户登录数监控详情**
3**、当日报警**
以天津为例
可以看到天津今天只有内存报警
4**、监控视图**
可以看到监控视图有
3种,分别有日、月、年的,下面我们分别的查看一下
A**、当日报警,以新疆数据库为例**
(
1)新疆数据库的硬盘使用率
**(
2)新疆数据库的cpu使用率 **
(
3)新疆数据库的io使用率
(
4)新疆数据库的load使用率
(
5)新疆数据库的内存使用率
(
6)新疆数据库的用户登录数
以上为什么在
hour为13,是因为我设置的hour为当前时间的,比如当前为2012年10月23日13:49分,那么当前的hour为13.而右上角的2行文字内容是:
2012****年
10月23日,database数据库的用户登录不正常的使用红色线表示
2012****年
10月23日,database数据库的用户登录正常的使用绿色线表示
** **
B**、当月报警,以湖南引擎为例**
(
1)湖南引擎的硬盘使用率
(
2)湖南引擎的cpu使用率****
** **
(
3)湖南引擎的io使用率
(
4)湖南引擎的load使用率
(
5)湖南引擎的内存使用率
(
6)湖南引擎的用户登录数
注意,
month(31)是本月有多少天,通过shell脚本进行计算的。
C**、当年报警,以贵州引擎为例**
(
1)贵州引擎的cpu使用率
(
2)贵州引擎的cpu使用率
(
3)贵州引擎的io使用率
(
4)贵州引擎的load使用率
(
5)贵州引擎的内存使用率
(
6)贵州引擎的用户登录数
5、邮件接收的
shell报警截图
挑选几个真实的服务器报警给大家展示一下shell脚本监控服务器的报警系统。
A**、服务宕掉的报警**
B**、
hardware硬件错误信息报警**
C**、
load负载报警**
D**、内存报警**
E**、
swap报警**
由于本文文字与脚本内容过多,超过每篇8万字的限制,所以不得不分成多篇博文,尽请见谅。
下一篇文章地址:
运维自动化之使用PHP+MYSQL+SHELL打造私有监控系统(二)
http://dl528888.blog.51cto.com/2382721/1035131
BTW:如果大家认为我写的不错,希望能给我的博客投个票,谢谢!