• 前言
• 一、实验环境
• 二、基于 Prometheus + Grafana 的监控解决方案
• 三、实施步骤
  • 3.1 获取安装包
  • 3.2 数据库安装用户部署安装包
  • 3.3 启动文件修改
  • 3.4 示例
  • 3.5 增加crontab
  • 3.6 部署检测
  • 3.7 安装prometheus
    • （1）下载
    • （2）解压
    • （3）启动
  • 3.8 安装 grafana
  • 3.9 修改数据库参数

前言

Prometheus是从云原生计算基金会（CNCF）毕业的项目。是由前google员工2015年正式发布的开源监控系统，采用Go语言开发。整套系统由监控服务、告警服务、时序数据库等几个部分，及周边生态的各种指标收集器（Exporter）组成，是在当下主流的监控告警系统。

exporter：广义上向prometheus提供监控数据的程序都可以成为一个exporter的，一个exporter的实例称为target, exporter来源主要2个方面，一个是社区提供的，一种是用户自定义的。

Grafana 是一款采用 go 语言编写的开源应用，主要用于大规模指标数据的可视化展现，是网络架构和应用分析中最流行的时序数据展示工具，目前已经支持绝大部分常用的时序数据库。

一、实验环境

二、基于 Prometheus + Grafana 的监控解决方案

整体思想：exporter为部署在服务器的探针；prometheus远程收集exporter的数据，存在时序数据库中；grafana从prometheus获取数据并展现，实现监控数据的可视化。

三、实施步骤

3.1 获取安装包

安装包文件名为：cmdb_exporter.v1.1.tar.gz

3.2 数据库安装用户部署安装包

数据库安装的系统用户，登录到主机。上传安装包到$HOME目录下
解压 tar -zxf cmdb_exporter.v1.1.tar.gz 会得到 exporter 目录。
里面的文件，见1.2节的内容。

3.3 启动文件修改

主要是修改run_cmdb_exporter 启动文件。
最重要的，是输出日志改向。因为日志内容较多，可以输出到空间大的数据盘，在正常运行后可以输出到 /dev/null.
修改语句为第32行：
export DATA_SOURCE_NAME="host=192.168.1.51 user=cmdb_exporter password=cmdbExportrt@1234 port=17800 dbname=ogexporter sslmode=disable"
修改第42行的nohup改向操作
nohup $HOME/exporter/cmdb_exporter --config=$ConFile --log.level=debug &

3.4 示例

#!/bin/bash

source ~/.bash_profile

#检测进程是否存在，已经存在时，就退出不执行
Num=`ps -ef | grep cmdb_exporter | wc -l`
echo Num=$Num

# 假设原来有1个进程，加上本身的进程，就是2个以上，所以判断大于1
if [ $Num -gt 2 ]; then
          exit 0
  fi
# 配置文件
ConFile=/home/omm/enmo/exporter/cmdb_query.yaml

# 连接参数, 注意修改IP地址，端口等
DATA_SOURCE_NAME="host=192.168.1.51 user=cmdb_exporter password=xxxxx port=17700 dbname=postgres sslmode=disable"

# 日志文件, 注意要修改
LogFile=/home/omm/enmo/exporter/cmd_export.log

# 启动程序
nohup /home/omm/enmo/exporter/PanWeiDB_exporter_linux_amd64 --config=$ConFile --parallel=1 --log.level=debug --url="$DATA_SOURCE_NAME" > $LogFile 2>&1  &

3.5 增加crontab

每1分钟检测一次进程是否在，在就退出
*/1 * * * * ~/exporter/run_cmdb_exporter >/dev/null 2>&1

3.6 部署检测

查看进程是否在
ps -ef | grep cmdb_exporter
提取数据：
http://192.168.1.51:9187/metrics

3.7 安装prometheus

（1）下载

https://github.com/prometheus/prometheus/releases/download/prometheus-2.49.0-rc.0.linux-amd64.tar.gz

（2）解压

tar -xzvf prometheus-2.49.0-rc.0.linux-amd64.tar.gz

（3）启动

进入解压目录，执行 ./prometheus --config.file=prometheus.yaml &

3.8 安装 grafana

[root@localhost ~]# yum install -y grafana-enterprise-8.5.27-1.x86_64.rpm
[root@localhost ~]#
[root@localhost ~]# systemctl start  grafana-server
[root@localhost ~]# systemctl enable grafana-server
[root@localhost ~]# systemctl status grafana-server

3.9 修改数据库参数

Last login: Thu Jan  4 14:16:46 2024 from 133.96.123.50
[omm@panweidb2 ~]$ gs_guc reload -I all -N all -c "password_encryption_type=1"
The gs_guc run with the following arguments: [gs_guc -I all -N all -c password_encryption_type=1 reload ].
Begin to perform the total nodes: 3.
Popen count is 3, Popen success count is 3, Popen failure count is 0.
Begin to perform gs_guc for datanodes.
Command count is 3, Command success count is 3, Command failure count is 0.

Total instances: 3. Failed instances: 0.
ALL: Success to perform gs_guc!


[omm@panweidb2 ~]$ 
[omm@panweidb2 ~]$ 
[omm@panweidb2 ~]$ gsql -r
 select * from pg_node_env; 
gsql ((PanWeiDB(openGauss) 1.0.0 build 9a7e96bc) compiled at 2022-11-08 20:51:50 commit 0 last mr  )
NOTICE : The password has been expired, please change the password. 
Non-SSL connection (SSL connection is recommended when requiring high-security)
Type "help" for help.

PanWeiDB=#  select * from pg_node_env; 
     node_name     |          host           | process | port  |    installpath    |         datapath          |            log_directory             
-------------------+-------------------------+---------+-------+-------------------+---------------------------+--------------------------------------
 dn_6001_6002_6003 | localhost,133.96.123.51 |    6949 | 17700 | /opt/panweidb/app | /opt/panweidb/cmdata/data | /opt/panweidb/log/omm/pg_log/dn_6002
(1 row)

PanWeiDB=# show password_encryption_type;
 password_encryption_type 
--------------------------
 1
(1 row)

PanWeiDB=# CREATE USER cmdb_exporter WITH PASSWORD 'Bcv_1308' MONADMIN;
NOTICE:  The encrypted password contains MD5 ciphertext, which is not secure.
CREATE ROLE
PanWeiDB=# grant usage on schema dbe_perf to cmdb_exporter;
grant select on pg_stat_replication to cmdb_exporter;
GRANT
PanWeiDB=# grant select on pg_stat_replication to cmdb_exporter;
GRANT
PanWeiDB=# grant ALL PRIVILEGE to cmdb_exporter;
ALTER ROLE
PanWeiDB=# 

四、 导入json 文件到Grafana

最后展示结果