跳转到内容
主菜单
主菜单
移至侧栏
隐藏
导航
首页
最近更改
随机页面
MediaWiki帮助
代码酷
搜索
搜索
中文(中国大陆)
外观
创建账号
登录
个人工具
创建账号
登录
未登录编辑者的页面
了解详情
贡献
讨论
编辑“︁
Kafka消息系统
”︁(章节)
页面
讨论
大陆简体
阅读
编辑
编辑源代码
查看历史
工具
工具
移至侧栏
隐藏
操作
阅读
编辑
编辑源代码
查看历史
常规
链入页面
相关更改
特殊页面
页面信息
外观
移至侧栏
隐藏
您的更改会在有权核准的用户核准后向读者展示。
警告:
您没有登录。如果您进行任何编辑,您的IP地址会公开展示。如果您
登录
或
创建账号
,您的编辑会以您的用户名署名,此外还有其他益处。
反垃圾检查。
不要
加入这个!
== 核心概念 == Kafka的核心架构围绕以下几个关键概念构建: === 1. 主题(Topic) === 主题是消息的分类名称,生产者将消息发布到特定主题,消费者从主题订阅消息。一个Kafka集群可以管理多个主题。 === 2. 分区(Partition) === 每个主题可以被分为多个分区,分区是物理存储单位。分区提供: * 并行处理能力 * 数据冗余(通过副本) * 消息顺序保证(仅在分区内) === 3. 生产者(Producer) === 生产者是向Kafka主题发布消息的客户端应用程序。生产者决定将消息发送到哪个分区(可通过轮询、键哈希或自定义策略)。 === 4. 消费者(Consumer) === 消费者从主题读取消息的客户端应用程序。消费者可以: * 单独消费(单个消费者) * 组成消费者组(实现负载均衡) === 5. 代理(Broker) === Kafka服务器实例,负责消息存储和转发。多个代理组成Kafka集群。 === 6. ZooKeeper协调 === Kafka使用ZooKeeper管理集群元数据、领导者选举和消费者偏移量(新版本已逐步减少对ZooKeeper的依赖)。 <mermaid> graph TD P[Producer] -->|发布消息| T[Topic] T -->|分区1| B1[Broker1] T -->|分区2| B2[Broker2] C1[Consumer1] -->|订阅| T C2[Consumer2] -->|订阅| T B1 -.-> Z[ZooKeeper] B2 -.-> Z </mermaid>
摘要:
请注意,所有对代码酷的贡献均被视为依照知识共享署名-非商业性使用-相同方式共享发表(详情请见
代码酷:著作权
)。如果您不希望您的文字作品被随意编辑和分发传播,请不要在此提交。
您同时也向我们承诺,您提交的内容为您自己所创作,或是复制自公共领域或类似自由来源。
未经许可,请勿提交受著作权保护的作品!
取消
编辑帮助
(在新窗口中打开)