5月 092018
 

随着3.4版本的发布,出现了一大波新功能,后续会陆续推出3.4版本新功能介绍及实践.本次说一下3.4新增的Preprocessing这个功能.(3.4中文翻译好像有点问题把Preprocessing翻译为进程,翻译有点错误)Preprocessing为预处理,预加工(google翻译^_^)使用这个功能可以对item收到的数据行处理,处理之后再存入数据库或展示出来.

下面结合一个监控nginx状态的实际应用来介绍一下item预处理功能及Dependent item的使用.

Nginx status配置

nginx作为一款强大的web服务器已被广泛使用,结合[nginx-module-vts](https://github.com/vozlt/nginx-module-vts)插件可以将nginx的状态通过http方式输出,可使用这种方式来监控nginx的运行状态,配置好插件之后,访问插件页面可以看到如下状态页面

点击下面的json可以输出为标准的json格式

表明nginx配置完成.

Zabbix agent配置

zabbix自带web监控,由于功能较弱,因此我自己写了一个类似web监控的工具,通过GET方式访问nginx status页面(任何GET请求都可),将返回结果输出.web_get 我自己写的web检测小工具,大家可下载使用.
web_get工具下载:
Linux 64位 http://cactifans.hi-www.com/tools/web_get.x86_64.tar.gz
Windows 64位 http://cactifans.hi-www.com/tools/web_get.windows_amd64.zip
配置zabbi修改zabbix agent 配置文件,添加如下(根据自己实际路径配置,并赋予可执行权限)

 

UserParameter=nginx.status[*],/usr/local/zabbix/share/zabbix/web_get $1 $2

配置之后重启zabbix agent.可在zabbix server上使用zabbix_get命令进行测试UserParameter是否工作正常

zabbix_get -s 192.168.0.1 -k nginx.status[http,exp.test.com/ngx_status/format/json]

 

**192.168.0.1**为被监控客户端,其中包含2个参数,第一个**http**为协议,一般为http或https,后面为要监控的**nginx status**的具体URL.根据自身具体情况配置.如果返回如下信息,表示配置成功

Zabbix server配置

上一步在zabbix agent配置文件中指定了key为nginx.status,因此这里建立的第一个item的key应该为nginx.status.这里可以建一个模版,把这些key统一到一个模版,我这里为了演示就直接在host上建立item,如图

type为zabbix agent,这里key里有2个参数,第一个参数为协议,为http或https,第二个参数为nginx status的URL地址.由于返回结果为json,因此Type of information 选择**Text**即可.建立**Master item**之后,开始建立[Dependent item](https://www.zabbix.com/documentation/3.4/manual/config/items/itemtypes/dependent_items?s[]=dependent&s[]=item)这也是3.4的新功能之一,大致为这些item的数据都是来自Master item.通过Preprocessing处理master item的数据而获得.建立之前先使用zabbix_get获取json数据,复制json字符串,并使用[在线工具]( http://tool.oschina.net/codeformat/json)或编辑器格式化json,可看到json的层次.

如果我们要获取json中nginxVersion这个数据,我们可以这样建立一个Dependent item.点击create item

item name可随便填写,能标示就成.type这里一定要选择 **Dependent item**,key这里可以随便添能标示就成.由于nginx version为字符所以Type of information 选择为text,其他选项一般默认即可.之后点击**Preprocessing**标签,由于此item数据来自nginx status 这个master,因此要使用预处理功能,对nginx status获取的json进行处理,得到我们需要的nginxVersion这个数据.

如图name 选择JSON Path,Parameters为需要获取的字段.具体使用方式可查看[item_value_preprocessing](https://www.zabbix.com/documentation/3.4/manual/config/items/item#item_value_preprocessing)说明,由于nginxVersion为第一层,Parameters填写为$.nginxVersion即可,保存之后,过一会就可以看到nginxVersion数据已经采集了.

接下来再添加一个nginx连接数统计.点击create item,如图配置item
其他不变

由于nginix connections requests为一个数值类型,这里Type of information 选择Numeric类型.key可随便填写.**Preprocessing**标签如图配置

由于通过获取的json可以看到connections requests在json里为connections之内的requests,因此Parameters填写为$.connections.requests.从nginx-module-vts页面得知,这个requests为The total number of requested client connections.即所有客户端连接,为一个计数器,这里我们需要统计为速率,因此这里点击add,从上一步获取的requests数据再做一次计算,选择Change per second即之前的每秒变化(Req/s)即可.依照此方法可添加其他指标.最后效果如下:
最新数据

请求汇总

(图上数据较大出为第一次没有添加Change per second,造成统计所有请求数,后来查看nginx-module-vts文档得知,此数据为计数器,后续改动导致数据突降.由于是测试服务器基本无人访问数据为0属于正常)

拓展即思考

 

个人认为Preprocessing和Dependent item主要有以下几个好处和扩展之处:
1.切割处理以前不好处理的数据**.之前通过SNMP获取到设备内存或者cpu使用率,获取数据往往为“8Mb”或“16%”等带单位的数据,这种类型不属于整型和浮点类型,因此只能作为字符处理,而作为字符就不能做成折线图,不能根据数值来做触发器.有了预处理功能就可以完美解决这个问题.
2.item数据可为xml/json等格式的数据,丰富了数据采集类型**.通过Preprocessing功能获取指定字段,存入数据.
3.结合3.4的Dependent items可以提高监控效率.**通过Dependent items功能可一次返回多个item的数值,提高监控的效率,降低了系统负荷,减少网络流量
4.多样化数据处理,可对采集数据做深层次处理.**可对一些暴露http接口的应用或者服务进行监控
5.结合UserParameter功能,可进行分布式监控.**对网站/App等进行分布式的监控.

如果觉得我的文章对您有用,请随意打赏。您的支持将鼓励我继续创作!**

打赏
 Posted by at 下午 2:31

 Leave a Reply

You may use these HTML tags and attributes: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <s> <strike> <strong>

(required)

(required)