监控-自定义指标

pushgateway

prometheus默认是pullgateway的采集方法，主动去node节点服务器上采集数据，如果node节点服务器过多的情况下，会造成prometheus服务器负载过高，承受能力增加！所以需要进行特殊的配置
pushgatewy介绍： pushgateway 是另⼀种采⽤被动推送的⽅式（⽽不是exporter 主动获取）获取监控数据的prometheus 插件！运行方式：它是可以单独运⾏在任何节点上的插件（并不⼀定要在被监控客户端），也可以是单独的服务器，也可以和prometheus放在一台服务器上采集方式：通过⽤户⾃定义开发脚本把需要监控的数据发送给 pushgateway ，然后pushgateway 再把数据推送给prometheus server API: 推送方式采用http方式推送，类似rest 推送的端口默认是9100，路径为：
# JOB_NAME: job标签       LABEL_NAME: 自定义标签
/metrics/job/<JOB_NAME>{/<LABEL_NAME>/<LABEL_VALUE>}

pushgateway安装

wget https://github.com/prometheus/pushgateway/releases/download/v1.0.0/pushgateway-1.0.0.linux-amd64.tar.gz
tar zfx pushgateway-1.0.0.linux-amd64.tar.gz
cd pushgateway-1.0.0.linux-amd64 && ./pushgateway
或者使用daemonize 启动

如何使用

# 首先： 需要在 prometheus server 配置一下：这里我们的prometheus server 与 pushgateway安装在同一个服务器上
- job_name: 'pushgateway'
  static_configs:
    - targets: ['localhost:9091']

# pushgateway主要是以用户自定义脚本的形式来推送给pushgateway，那么这里我们写一个统计系统当中正在监听的连接数
[root@cloud shell]# cat node_shell.sh 
#!/bin/bash
# 定义来源地、标签
instance_name='192.168.1.134'
label="count_netstat_established_connections"
count_netstat_established_connections=$(netstat -antp |grep -i established|wc -l)

echo "$label $count_netstat_established_connections" |curl --data-binary @-http://192.168.1.134:9091/metrics/job/pushgateway/instance/$instance_name

http://192.168.1.134:9091/metrics/job/ 这里的IP地址是pushgateway服务器地址及端口，
job/pushgateway 跟这刚才在prometheus.yml 当中定义的job_name标签名字是一样的！
instance/$instance_name 推送后显示的机器名字是什么，可以自定义hostname（需要在prometheus服务器中hosts解析）也可以使用服务器IP的地址
这里综合意思就是：将定义的key values 以HTTP POST 的方式发送请求，并以纯二进制传输的方式发送给HTTP服务器器(pushgateway)；

1、只要服务器不当机那么基本上 pushgateway运⾏还是很稳定的就算有太多的脚本同时都发送给⼀个pushgateway 其实也只是接收的速度会变慢丢数据没有遇到过
2、其实只要我们在写脚本的时候细⼼⼀些别出错，那么监控数据也不会有错

Previous监控-基础指标 Next黑盒-blackbox_exporter

Last updated 3 years ago