当前位置: 首页 > article >正文

Kafka 集群原来是使用ZK管理,现在新版本是怎么管理的?

目录

基于 ZooKeeper 的管理模式

基于 KRaft 的管理模式

迁移到 KRaft 模式的优势

迁移步骤


Kafka 早期依赖 ZooKeeper(ZK)进行元数据管理、集群协调等工作,但在新版本(Kafka 2.8.0 及之后)引入了 KRaft 模式来替代 ZooKeeper 进行管理。下面详细介绍这两种管理模式以及新版本的变化:

基于 ZooKeeper 的管理模式

在早期版本中,Kafka 严重依赖 ZooKeeper 进行以下关键管理任务:

  • 元数据存储:Kafka 将集群的元数据(如主题、分区、副本信息等)存储在 ZooKeeper 中。每个 Broker 启动时都会向 ZooKeeper 注册自己的信息,并且监听元数据的变化。
  • 集群协调:ZooKeeper 负责协调 Kafka 集群中的各种操作,如领导者选举。当某个分区的领导者副本所在的 Broker 发生故障时,ZooKeeper 会参与新领导者的选举过程。
  • Broker 状态管理:ZooKeeper 可以监控每个 Broker 的状态,当 Broker 加入或离开集群时,ZooKeeper 会通知其他相关组件进行相应的调整。

http://www.kler.cn/a/543039.html

相关文章:

  • Spring Boot过滤器链:从入门到精通
  • ASP.NET Core SignalR的协议协商
  • Flutter_学习记录_基本组件的使用记录_2
  • 活动预告 | 为 AI 新纪元做好准备:助力安全的业务转型
  • HarmonyOS 5.0应用开发——NodeContainer自定义占位节点
  • SQL Server 逻辑查询处理阶段及其处理顺序
  • IPC 共享通俗讲解及其安全风险
  • 【devops】 Git仓库如何fork一个私有仓库到自己的私有仓库 | git fork 私有仓库
  • 【电路笔记】-同步计数器
  • 学习星开源在线考试教育系统
  • FFmpeg Audio options
  • Hello Robot具身智能移动操作机器人Stretch 3:开源、灵巧、友好
  • Java 大视界 -- 区块链赋能 Java 大数据:数据可信与价值流转(84)
  • c# OpenCvSharp 16位转8位图
  • C++ 类和对象 (流插入、流提取、const)
  • MySQL的操作
  • 波导阵列天线学习笔记8 高增益、低轴比的3D打印Ka波段圆极化单脉冲天线阵列
  • VSCode的安裝以及使用
  • Qt:常用控件
  • Leetcode - 149双周赛
  • 一文读懂双通道CAN转以太网
  • Qt plugin 插件 如何内嵌json作为metaData
  • 【设计模式】【行为型模式】命令模式(Command)
  • wx057基于ssm+vue+uniapp的智慧乡村旅游服务小程序
  • PHP函数介绍—get_headers(): 获取URL的响应头信息
  • 嵌入式硬件篇---原码、补码、反码