Kafka系列之：Kraft模式

1年前作者：最笨的羊羊分类：Toy博客阅读(9)违法举报

这篇具有很好参考价值的文章主要介绍了Kafka系列之：Kraft模式。希望对大家有所帮助。如果存在错误或未考虑完全的地方，请大家不吝赐教，您也可以点击"举报违法"按钮提交疑问。

一、Kraft架构

Kafka元数据存储在zookeeper中，运行时动态选举controller，由controller进行Kafka集群管理。
Kraft模式不再依赖zookeeper集群，用三台controller节点代替zookeeper，元数据保存在controller中，由controller直接进行Kafka集群管理。

Kraft的好处有以下几个：文章来源地址https://www.toymoban.com/news/detail-650604.html

Kafka不再依赖外部框架，而是能够独立运行
controller管理集群时，不再需要从zookeeper中先读取数据，集群性能上升。
由于不依赖zookeeper，集群扩展时不再受到zookeeper读写能力限制。
controller不再动态选举，二是由配置文件规定

到了这里，关于Kafka系列之：Kraft模式的文章就介绍完了。如果您还想了解更多内容，请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章，希望大家以后多多支持TOY模板网！

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：如若内容造成侵权/违法违规/事实不符，请点击违法举报进行投诉反馈，一经查实，立即删除！

分享到：

领支付宝红包赞助服务器费用

Kafka入门， Kafka-Kraft 模式部署（二十六）
左图为kafka现有架构，元数据在zookeeper中，运行时动态选举controller,由controller进行kafka集群管理，右图为kraft模式架构（实验性），不再依赖zookeeper集群，而是用三台controller节点代替zookeeper，元数据保存在controller中，由controller直接2进行kafka集群管理好处： 1、kafka不再依赖外
2024年02月13日
浏览(15)
Kraft模式下Kafka脚本的使用
Kafka集群版本：V3.5.1 名称 Node1 Node2 Node3 IP 172.29.145.157 172.29.145.182 172.29.145.183 （1）查看Kraft集群中的状态以及Leader节点，投票节点使用--status可以查看集群选举次数/水位线以及投票节点等使用--replication可以查看Ledaer和Follower分布 ./kafka-metadata-quorum.sh --bootstrap-server 172.29.145.1
2024年02月08日
浏览(11)
kafka伪集群部署，使用KRAFT模式
2024年02月07日
浏览(13)
【kafka+Kraft模式集群+SASL安全认证】
准备3个kafka，我这里用的kafka版本为：kafka_2.13-3.6.0，下载后解压：更改解压后的文件名称： cp kafka_2.13-3.6.0 kafka_2.13-3.6.0-1/2/3 分别得到kafka_2.13-3.6.0-1、kafka_2.13-3.6.0-2、kafka_2.13-3.6.0-3 copy一份config/kraft/server.properties配置文件，修改名称 server-sasl.properties 进入各个config/kraft/server
2024年02月03日
浏览(12)
kafka 安装以及 Kraft 模式、安全认证配置
常见安装：zookeeper + kafka zookeeper 单节点安装： apach官网下载对应包：apache-zookeeper-3.7.1-bin.tar.gz 修改对应配置文件 /conf/zoo_sample.cfg ，配置端口以及数据目录 sh zkServer.sh start 启动、 sh zkServer.sh stop 停止、 sh zkServer.sh status 状态 sh zkCli.sh -server 客户端 zookeeper 集群安装：在每个
2024年02月10日
浏览(18)
使用kafka还在依赖Zookeeper，kraft模式了解下
Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者在网站中的所有动作流数据。其核心组件包含Producer、Broker、Consumer，以及依赖的Zookeeper集群。其中Zookeeper集群是Kafka用来负责集群元数据的管理、控制器的选举等。用过kafka的开发者应该知道，每次启动
2024年02月10日
浏览(11)
（二十六）大数据实战——kafka集群之Kraft模式安装与部署
本节内容主要介绍kafka3.0版本以后，一种新的kafka集群搭建模式看kraft，在该模式下，kafka高可用不在依赖于zookeeper，用 controller 节点代替 zookeeper，元数据保存在 controller 中，由 controller 直接进行 Kafka 集群管理。 ①解压kafka安装包到/opt/module/kafka-kraft目录下 - 命令： ②修改k
2024年02月08日
浏览(9)
大数据开发之Kafka（broker、消费者、eagle监控、kraft模式）
4.1.1 Zookeeper存储的Kafka的信息 1、查看zookeeper中的kafka节点所存储的信息启动Zookeeper客户端通过ls命令列出kafka节点内容 2、zookeeper中存储的kafka信息在zookeeper的服务端存储的Kafka相关信息： 1）/kafka/brokers/ids [0,1,2] 记录有哪些服务器 2）/kafka/brokers/topics/first/partitions/0/state {“l
2024年01月21日
浏览(12)
kafka3.4.0单机版安装配置教程（kraft模式舍弃ZK）
下载地址：https://archive.apache.org/dist/kafka/3.4.0/
2024年04月17日
浏览(13)
彻底搞懂Docker容器与Kraft模式kafka集群关于消息大小相关参数设置
部署背景：在DockerHub拉取的bitnami/kafka:3.4.1 镜像，如果要部署在Docker-Swarm集群或者单Docker部署，对于消息大小设置需要添加参数 KAFKA_CFG_MESSAGE_MAX_BYTES，如果设置为其他不符合规范的参数格式，会导致容器一直启动不了。 PS：KAFKA_CFG_MESSAGE_MAX_BYTES 是针对Broker级别消息大小限制
2024年02月08日
浏览(13)