【Kafka】Kafka Producer整体架构概述及源码分析

电玩女神 2022-10-19 14:00 163阅读 0赞

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIxMzgzNDM1_size_16_color_FFFFFF_t_70]

# 1.概述 #

转载并且补充：原文地址：[https://blog.csdn.net/XU906722/article/details/104420045][https_blog.csdn.net_XU906722_article_details_104420045]

本文基于Kafka 0.11 版本

# 2.整体架构 #

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIxMzgzNDM1_size_16_color_FFFFFF_t_70 1]

## 2.1 线程 ##

> 整个 Kafka 客户端由两个线程协调运行，即Main线程和Sender线程。  
> 在Main线程中由KafkaProducer创建消息，然后通过Interceptor、Serializer和Partitioner之后缓存到RecordAccumulator(消息累加器)中。  
> Sender线程 负责从RecordAccumulator中获取消息并发送到Kafka中。

<

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIxMzgzNDM1_size_16_color_FFFFFF_t_70]: /images/20221004/a14100e0dda64527bd7cc050677a8b6f.png
[https_blog.csdn.net_XU906722_article_details_104420045]: https://blog.csdn.net/XU906722/article/details/104420045
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIxMzgzNDM1_size_16_color_FFFFFF_t_70 1]: /images/20221004/6612df45e23b4a53bcb683d1a2a50fbc.png

发表评论取消回复

表情：

评论列表（有 0 条评论，163人围观）

还没有评论，来说两句吧...

相关阅读

相关 Kafka 源码分析——Producer

文章目录前言 Producer 整体流程 Producer 初始化 Producer 发送流程执行拦截器逻辑获取集

电玩女神/ 2023年10月16日 11:09/ 0 赞/ 3 阅读

相关 RocketMQ 源码分析——Producer

文章目录消息发送代码实现消息发送者启动流程检查配置获得MQ客户端实例启动实例定时任务

刺骨的言语ヽ痛彻心扉/ 2023年10月16日 10:34/ 0 赞/ 22 阅读

相关 zuul概述及源码分析

一。 Zuul概述: Zuul路由是微服务架构的不可或缺的一部分，提供动态路由，监控，弹性，安全等的边缘服务。Zuul是Netflix出品的一个基于JVM路由和服务端的负

àì夳堔傛蜴生んèń/ 2022年11月20日 04:58/ 0 赞/ 173 阅读

相关【Kafka】Kafka Producer整体架构概述及源码分析

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ub

电玩女神/ 2022年10月19日 14:00/ 0 赞/ 164 阅读

相关 Tomcat源码分析(零) : 整体架构

Tomcat架构及其重要组件 ![Tomcat的系统架构][Tomcat] Tomcat的系统架构 Server是管理Service接口的，是Tomcat的一个

布满荆棘的人生/ 2022年05月15日 02:44/ 0 赞/ 317 阅读

相关 Bootstrap源码分析系列之整体架构

[Bootstrap源码分析系列之整体架构][Bootstrap] 作为一名合格的前端工程师，你肯定听说过Bootstarp框架。确实可以说Bootstrap框架是最流行

小鱼儿/ 2022年05月11日 10:48/ 0 赞/ 277 阅读

相关 muduo网络库源码分析——整体架构

muduo的源代码中，虽然不考虑可移植性，但还是划分了很多小的类（Channel、Socket、TcpConnection、Acceptor，不知道是不是参考了java中的概念

我不是女神ヾ/ 2022年05月08日 07:06/ 0 赞/ 412 阅读

相关 Tomcat源码分析（一）：整体架构设计

源码结构与核心接口设计架构图 ![在这里插入图片描述][20190106161944467.gif] ![在这里插入图片描述][watermark_type_

偏执的太偏执、/ 2022年03月30日 14:24/ 0 赞/ 361 阅读

相关 Dubbo源码分析系列之-整体架构设计

> 导语： > 在了解一个框架的源码的时候，第一步要了解的就是源码的结构，接下来第二步需要了解的就是源码的架构，下面这张图在Dubbo官网上所展示的Dubbo的架构设计

淡淡的烟草味﹌/ 2021年10月15日 06:49/ 0 赞/ 417 阅读

相关 Bootstrap源码分析系列之整体架构

作为一名合格的前端工程师，你肯定听说过`Bootstarp`框架。确实可以说`Bootstrap`框架是最流行的前端框架之一。可是也有人说`Bootstrap`是给后端和前端小

青旅半醒/ 2021年06月26日 16:06/ 0 赞/ 491 阅读