Kafka-manager 下载、配置、连接

这篇具有很好参考价值的文章主要介绍了Kafka-manager 下载、配置、连接。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

hadoop -> zookeeper -> kafka -> kafka-manager 

一、kafka-manager下载

kafka-manager是 yahoo的一个Kafka监控管理项目。所以是国外网站,下载资源慢,而且还需要sbt编译,就更慢了。

根据查找资料过程中,找到以下两个博客有现成的软件包。

kafka manager 2.0.0.0.zip :kafka manager 2.0 工具下载 已打包完成_51CTO博客_kafka tool下载 

kafka-manager-1.3.3.7.zip:

Kafka可视化管理工具kafka-manager部署安装和使用_kafka可视化客户端_至尊宝l的博客-CSDN博客

根据个人喜好和kafka版本选择,选择最接近的kafka版本(就是kafka-manager连接kafka的时候要选择kafka版本)。

kafka manager,Hadoop,kafka,分布式

 上面这张图是kafka-manager2.0 框架的kafka版本选择。

二、kafka-manager配置

unzip解压kafka-manager2.0压缩包,然后修改kafka-manager安装目录下conf里面的配置文件

application.conf。

解压缩
unzip kafka-manager-2.0.0.0.zip
vim application.conf

/opt/module/kafka-manager-2.0.0.0/conf/application.conf
添加以下内容:(连接zookeeper)
kafka-manager.zkhosts="hadoop102:2181,hadoop103:2181,hadoop104:2181"

就两步,实在不懂就搜详细教程。

启动kafka-manager

nohup bin/kafka-manager -Dhttp.port=7456 >/opt/module/kafka-manager-2.0.0.0/start.log 2>&1 &  // &:在后台运行

启动报错就看start.log。

三、kafka-manager连接

kafka manager,Hadoop,kafka,分布式

 上面这张图是本人web页面连接kafka的配置。(版本选最接近的kafka版本就可以了)

注意:Cluster Zookeeper  Hostshadoop102:2181,hadoop103:2181,hadoop104:2181/kafka

最后有个” /kafka "是因为配置kafka的时候,把kafka的相关信息注册到了zookeeper的kafka目录,所以连接的时候要把zookeeper上的kafka这个目录的信息连接上,不然就连接不上kafka集群,就查看不到kafka集群的信息。

kafka manager,Hadoop,kafka,分布式

上面这张图是kafka/config/server.properties里面的配置。

JMX(Java Management Extensions)是Java平台提供的一种管理接口和框架,用于管理和监控Java应用程序和系统。JMX提供了一组标准的API,使得开发者能够使用Java语言编写管理工具,以便监控和管理应用程序、设备或系统。JMX是Java平台提供的一种管理接口和框架,可以帮助开发者编写管理工具,以便监控和管理应用程序、设备或系统。

JMX要选择就要在kafka开启JMX

具体看博客:

Kafka可视化管理工具kafka-manager部署安装和使用_kafka可视化客户端_至尊宝l的博客-CSDN博客

四、总结

以上是kafka-manager监控的配置,步骤很简单,但是之间的连接关系不能懵。想了解更多,就看我指出的博客,这些都是写的非常的详细和易操作。

以上是本人在学习过程中遇到的问题及解决方案,对你们的问题不一定能起到帮助,但是可以给你们提供参考。如有雷同,请联系!!!文章来源地址https://www.toymoban.com/news/detail-722612.html

到了这里,关于Kafka-manager 下载、配置、连接的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • kafka配置远程连接

    要想实现在本地连接服务器的kafka,则必须在远程kafka配置远程连接 默认的 kafka 配置是无法远程访问的,解决该问题有几个方案。 方案1 注意必须是 ip,不能是 hostname 方案2 node0 是 hostname,需在 /etc/hosts 中 添加一行 云服务器如何配置远程连接: 局域网一般配置listeners=PLA

    2024年02月12日
    浏览(23)
  • kafka-- 安装kafka manager及简单使用

    然后save 一下 成功标志 外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传 生产者发送123 消费者发送123

    2024年02月07日
    浏览(27)
  • Docker安装kafka可视化管理工具 - Kafka Manager

    说明 :此处是在前面使用Docker安装kafka的基础之上,再来使用Docker安装kafka-manager 第一步:使用下述命令从Docker Hub查找镜像,此处我们要选择的是sheepkiller所构建的kafka-manager镜像 第二步:使用下述命令来启动kafka-manager容器  ZK_HOSTS :配置zookeeper服务的地址 kafka-manager服务的默

    2024年02月12日
    浏览(42)
  • Kafka系列之:连接器客户端配置覆盖策略

    KAFKA引入了每个源连接器和接收器连接器从工作线程属性继承其客户端配置的功能。在工作线程属性中,任何具有“生产者”或“消费者”前缀的配置。分别应用于所有源连接器和接收器连接器。虽然最初的提案允许覆盖源连接器和接收器连接器,但它在允许连接器的不同配

    2024年02月11日
    浏览(43)
  • kafka连接外网加密内网不加密的配置方式_kafka_server_jaas

    先自我介绍一下,小编浙江大学毕业,去过华为、字节跳动等大厂,目前阿里P7 深知大多数程序员,想要提升技能,往往是自己摸索成长,但自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前! 因此收集整理了一份《2024年最新Linux运维全套学习资料》,

    2024年04月22日
    浏览(27)
  • 在Windows上搭建Kafka环境的步骤,包括安装Java、下载Kafka、配置Zookeeper和Kafka、启动Zookeeper和Kafka、创建主题和生产者/消费者等

    1. 安装Java Kafka需要Java环境支持。可以从Oracle官网下载JDK,或者使用OpenJDK。 2. 下载Kafka 可以从Kafka官网下载Kafka二进制压缩包。解压后可以看到bin、config、libs等目录。 3. 配置Zookeeper Kafka依赖Zookeeper实现分布式协作。可以使用Kafka自带的Zookeeper,也可以独立安装Zookeeper。 如果使

    2024年02月11日
    浏览(33)
  • Springboot Kafka整合(开发实例、连接、配置TOPICS、发送消息)—官方原版

    Spring for Apache Kafka项目将Spring的核心概念应用于基于Kafka的消息传递解决方案的开发。我们提供了一个“模板”作为发送消息的高级抽象。 本快速教程适用于以下版本: Apache Kafka 客户端 3.3.x Spring Framework 6.0.x 最低 Java 版本:17 以下是一个不使用Spring Boot的应用程序示例;它既

    2024年02月06日
    浏览(48)
  • Linux多虚拟机集群化配置详解(Zookeeper集群、Kafka集群、Hadoop集群、HBase集群、Spark集群、Flink集群、Zabbix、Grafana部署)

    前面安装的软件,都是以单机模式运行的,学习大数据相关的软件部署,后续安装软件服务,大多数都是以集群化(多台服务器共同工作)模式运行的。所以,需要完成集群化环境的前置准备,包括创建多台虚拟机,配置主机名映射,SSH免密登录等等。 我们可以使用VMware提供

    2024年02月04日
    浏览(40)
  • Kafka增加安全验证安全认证,SASL认证,并通过spring boot-Java客户端连接配置

    公司Kafka一直没做安全验证,由于是诱捕程序故需要面向外网连接,需要增加Kafka连接验证,保证Kafka不被非法连接,故开始研究Kafka安全验证 使用Kafka版本为2.4.0版本,主要参考官方文档 官网对2.4版本安全验证介绍以及使用方式地址: https://kafka.apache.org/24/documentation.html#secu

    2024年02月01日
    浏览(44)
  • [Spark、hadoop]Spark Streaming整合kafka实战

    目录 一.KafkaUtils.createDstream方式 二.KafkaUtils.createDirectStream方式  温习 Kafka是由Apache软件基金会开发的一个开源流处理平台,它使用Scala和Java语言编写,是一个基于Zookeeper系统的分布式发布订阅消息系统,该项目的设计初衷是为实时数据提供一个统一、高通量、低等待的消息

    2024年01月21日
    浏览(38)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包