栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

prometheus监控hbase--对接ambari

prometheus监控hbase--对接ambari

本次使用javaagent-0.16.0版本
监控hbase基于ambari

1、下载jar包 jmx_prometheus_javaagent-0.16.0

下载链接:https://github.com/prometheus/jmx_exporter/releases

2、jar包放到集群中hbase启动的lib目录下

/usr/hdp/3.1.4.0-315/hbase/lib下

3、配置
所有节点加上JMX exporter的agent,此处用的是ambari,故在页面添加hbase-env
##对每个节点
export Hbase_JMX_base="-Dcom.sun.management.jmxremote.ssl=false -Dcom.sun.management.jmxremote.authenticate=false"
##对master节点,此处端口号是27000
export Hbase_MASTER_OPTS="$Hbase_MASTER_OPTS $Hbase_JMX_base -Dcom.sun.management.jmxremote.port=20101 -javaagent:$Hbase_HOME/lib/jmx_prometheus_javaagent-0.16.0.jar=27000:$Hbase_HOME/conf/hbase_jmx_config.yaml"
##对RS节点,此处端口号是27001
export Hbase_REGIONSERVER_OPTS="$Hbase_REGIONSERVER_OPTS $Hbase_JMX_base -Dcom.sun.management.jmxremote.port=20102 -javaagent:$Hbase_HOME/lib/jmx_prometheus_javaagent-0.16.0.jar=27001:$Hbase_HOME/conf/hbase_jmx_config.yaml"

4、创建hbase_jmx_config.yaml,在conf目录下
---
lowercaseOutputName: true
lowercaseOutputLabelNames: true
rules:

- pattern: Hadoop	<>Namespace_([^W_]+)_table_([^W_]+)_region_([^W_]+)_metric_(w+)
  name: Hbase_metric_$4
  labels:
namespace: "$1"
table: "$2"
region: "$3"
- pattern: Hadoop<>([w._]+)
  name: hadoop_$1_$4
  labels:
"name": "$2"
"sub": "$3"
- pattern: .+
5、重启hbase程序 6、查看监控项metrics

http://192.168.85.103:27001/metrics

7、prometheus配置 1)yaml文件添加配置
 - job_name: "hbase"
    static_configs:
      - targets: ["192.168.85.103:27001"]
2)重启prometheus
nohup ./prometheus --config.file=prometheus.yml &
3)页面访问

http://192.168.85.102:9090/

8、对接grafana

模板可以从下面链接下载
https://grafana.com/grafana/dashboards/
yum install grafana-enterprise-8.3.4-1.x86_64.rpm

9、下载grafana模板

https://grafana.com/grafana/dashboards/
此处下载2.x模板

10、页面查看

grafana页面导入模板

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/724703.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号