使用kafka_exporter监控Kafka

8月前作者：跟着大数据和AI去旅行分类：Toy博客阅读(28) 违法举报

这篇具有很好参考价值的文章主要介绍了使用kafka_exporter监控Kafka。希望对大家有所帮助。如果存在错误或未考虑完全的地方，请大家不吝赐教，您也可以点击"举报违法"按钮提交疑问。

prometheus 监控 kafka 常见的有两种开源方案，一种是传统的部署 exporter 的方式，一种是通过 jmx 配置监控，

项目地址：
- kafka_exporter：https://github.com/danielqsj/kafka_exporter
- jmx_exporter：https://github.com/prometheus/jmx_exporter

本文将采用kafka_exporter方式实现，相比JMX，其优势在于不需要消耗 JVM资源，指标收集时间从分钟级别降到秒级别，便于大规模集群的监控。

技术架构

kafka-exporter,大数据企业级实战,kafka

安装

下载解压

从https://github.com/danielqsj/kafka_exporter/releases下载最新版exporter,我下载的是1.7.0版本。文章来源地址https://www.toymoban.com/news/detail-757799.html

[root@slave03 ~]# tar -zxvf kafka_exporter-1.7.0.linux-amd64.tar.gz -C app/
[root@slave03 ~

到了这里，关于使用kafka_exporter监控Kafka的文章就介绍完了。如果您还想了解更多内容，请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章，希望大家以后多多支持TOY模板网！

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：如若内容造成侵权/违法违规/事实不符，请点击违法举报进行投诉反馈，一经查实，立即删除！

分享到：

领支付宝红包赞助服务器费用

kafka_exporter部署

kafka_exporter是prometheus官方提供的用于监控kafka运行状态的exporter 系统版本 CentOS 7.6.1810 (Core) CPU/内存 4核、8G kafka_exporter 1.6.0 kafka_exporter ID: 7589 参考 prometheus部署以上是centos上边部署kafka_exporter监控kafka的方法，有问题联系博主，后续也有其他插件

2023年04月08日
浏览(54)
jmx_exporter监控kafka和zk的jvm

GitHub - prometheus/jmx_exporter: A process for exposing JMX Beans via HTTP for Prometheus consumption wget https://repo1.maven.org/maven2/io/prometheus/jmx/jmx_prometheus_javaagent/0.16.1/jmx_prometheus_javaagent-0.16.1.jar 可以通过java.lang 采集机器cpu 内存等基础信息 cat \\\"EOF\\\" common.yaml --- lowercaseOutputLabelNames: true lowercaseOut

2024年02月19日
浏览(29)
dcgm-exporter + prometheus + kafka-adapter采集GPU容器监控

项目地址：https://github.com/NVIDIA/dcgm-exporter dcgm-exporter主要用于将nvidia gpu的监控数据导出到prometheus里，符合prometheus的exporter规范。 deployment/templates/metrics-configmap.yaml定义了采集的指标名及具体含义，我们的场景下主要关注GPU和显存指标。 helm文档：https://helm.sh/zh/docs/ dcgm-exporte

2024年02月13日
浏览(26)
kube-prometheus 使用 blackbox-exporter 进行icmp 监控

安装kube-prometheus 后默认在monitoring namespace中有创建 blackbox-exporter deployment。但默认没有icmp的module配置，无法执行ping探测。因为即使有icmp module，默认配置也是无法执行ping探测的（这篇文章要解决的就是这个问题），这可能也是默认没有icmp module的原因。首先把icmp module加上，

2024年02月13日
浏览(30)
prometheus使用node_exporter监控Linux主机CPU、内存、磁盘、服务运行状况

目录 1.node_exporter简介 2.部署node_exporter 2.1.安装node_exporter 2.2.编写system启动脚本 3.prometheus监控Linux主机 3.1.修改配置文件增加主机节点 3.2.主机添加成功 4.监控Linux主机CPU、内存、磁盘使用率 4.1.监控CPU使用率 4.1.1.获取空闲CPU监控数据 4.1.2.获取5分钟内的监控数据 4.1.3.获取5分钟

2024年04月16日
浏览(35)
kube-prometheus 系列3 使用 blackbox-exporter 进行 icmp 和 http 监控

安装kube-prometheus 后默认在monitoring namespace中有创建 blackbox-exporter deployment。但默认没有icmp的module配置，无法执行ping探测。因为即使有icmp module，默认配置也是无法执行ping探测的（这篇文章要解决的就是这个问题），这可能也是默认没有icmp module的原因。首先把icmp module加上，

2024年02月12日
浏览(37)
【监控系统】Prometheus监控组件Node-Exporter配置实战

这一节，我们来配置一下Node-Exporter，那么我们先来了解一下什么是Prometheus的Exporter？任何向Prometheus提供监控样本数据的程序都可以被称为一个Exporter，它是一种用于将不同数据源的指标提供给Prometheus进行收集和监控的工具。运行在应用程序、计算机、网络设备或者其他系统

2024年02月15日
浏览(35)
【监控系统】Prometheus监控组件Mysql-Exporter配置实战

Mysql-Exporter主要监控Mysql数据库的稳定性、吞吐量、连接情况、缓冲池使用情况、查询性能等各项指标，是我们压测时常常需要监控的一些指标。目前，Exporter 支持高于5.6版本的 MySQL 和高于10.1版本的 MariaDB。在 MySQL/MariaDB 低于5.6版本时，部分监控指标可能无法被采集。 OK，下

2024年02月16日
浏览(31)
Prometheus常用exporter及其常用监控指标

CPU相关指标： node_cpu_seconds_total{mode=\\\"idle\\\"} ：CPU空闲时间（秒）的总和。这是评估CPU使用率的重要指标之一。 node_cpu_seconds_total{mode=\\\"system\\\"} 、 node_cpu_seconds_total{mode=\\\"user\\\"} 等：分别表示CPU在内核态和用户态的运行时间。内存相关指标： node_memory_MemTotal_bytes ：内存总量（以字节为

2024年03月11日
浏览(53)
监控ElasticSearch(elasticsearch_exporter)

我们以监控elasticsearch7为例来编写一下具体的实现过程 ! 实现过程有两种，一种是通过grafana直接通过连接elasticsearch数据源，通过自己编写或者使用仪表盘模板导入的方式来实现监控，另一种是借助prometheus的exporter插件来抓取数据并由grafana来导入仪表盘模板实现监控。这里我

2024年02月04日
浏览(26)