Kafka 基础概念学习

川长思鸟来 2023-10-13 15:00 34阅读 0赞

### 基础概念学习 ###

*  一.基础概念
 *  二.结构图

# 一.基础概念 #

Kafka 基本概念：一种分布式的，基于发布/订阅的消息系统

<table> 
 <thead> 
  <tr> 
   <th>项目</th> 
   <th>Value</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>Broker</td> 
   <td>Kafka服务端(即部署了Kafka的机器)</td> 
  </tr> 
  <tr> 
   <td>Producer</td> 
   <td>生产者写数据到主副本</td> 
  </tr> 
  <tr> 
   <td>Consumer</td> 
   <td>消费者从主副本读数据</td> 
  </tr> 
  <tr> 
   <td>Consumer Group</td> 
   <td>消费者组，同一个组下可以订阅多个Topic，每个Topic分区不允许重复消费；多个不同组可以消费同一个Topic的同一个分区</td> 
  </tr> 
  <tr> 
   <td>Broker</td> 
   <td>Kafka服务端一个实例(一台机器)，每台实例上分布有主副本或从副本</td> 
  </tr> 
  <tr> 
   <td>Topic</td> 
   <td>主题，所有数据基于主题和分区实现隔离与交互(多个消息队列组合)</td> 
  </tr> 
  <tr> 
   <td>Partition</td> 
   <td>分区，对应于某个主题的一个数据分区(消息队列)，提高并发读写能力</td> 
  </tr> 
  <tr> 
   <td>Offset</td> 
   <td>偏移，某个消费在某个Topic的某个Partition下的偏移位置</td> 
  </tr> 
  <tr> 
   <td>Leader</td> 
   <td>主副本，与生产者和消费者交互，完成数据读写</td> 
  </tr> 
  <tr> 
   <td>Follower</td> 
   <td>从副本，从主副本同步数据，保证系统的高可用</td> 
  </tr> 
  <tr> 
   <td>ZooKeeper/KRaft</td> 
   <td>注册中心，用于管理主题、分区、偏移量、生产者、消费者的绑定关系</td> 
  </tr> 
  <tr> 
   <td>Reblance</td> 
   <td>重平衡，消费者心跳线程与Coordinator通信，消费者宕机等异常导致的心跳超时将触发重平衡</td> 
  </tr> 
  <tr> 
   <td>ISR</td> 
   <td>(IN-SYNC REPLICAS)从副本同步进度，被认为不同步的Broker将被剔除出列表，无法参与主节点的选举</td> 
  </tr> 
 </tbody> 
</table>

# 二.结构图 #

![在这里插入图片描述][de549533c9444681a34bd671b78d9bf9.png]

[de549533c9444681a34bd671b78d9bf9.png]: https://img-blog.csdnimg.cn/de549533c9444681a34bd671b78d9bf9.png