Kafka淘汰倒计时！这个新一代消息中间件，腾讯、华为都用疯了？

╰+哭是因爲堅強的太久メ 2022-10-20 03:51 139阅读 0赞

提起成熟的消息队列，毋庸置疑，大多数人的第一反应一定是 Kafka。

Kafka 作为一款明星级产品，能够彻底满足海量数据场景下高吞吐、高并发需求，在短短几年内，已经被阿里、腾讯、百度、字节跳动、Netflix、Twitter 等超一线大厂视为技术核心——**可以说今天还没听说过 Kafka，等于不知道地球是圆的！**

然而，技术的世界从没有“三十年河东三十年河西”的说法，夸张地比喻一下：很多技术经常是**今天诞生、明天爆火、后天淘汰**。**市面上真的没有其他产品有可能取代 Kafka 吗？一身光环、头顶王冠的 Kafka 究竟还能火多久？**

# 01 #

消息传递系统之王“陨落”在即

Kafka 最大的对手来了？

Kafka 被誉为消息传递系统之王，它全面具备：高吞吐量、低延迟、容错、持久性、可伸缩性，**尤其是广为人知的高吞吐量，Kafka 每秒大约可以生产约 25 万消息（50 MB），每秒处理 55 万消息（110 MB）**！Kafka 还有一个巨大的优势就是容错，它具备一个固有功能，可以自行应对集群中的节点故障。

![7b3b207eabbb93dd70a5255dba4c8839.png][]

Kafka 当然很强，但在运维和实践过程中，却也始终存在着一些棘手的问题。例如：

> 扩展性较差，剥离 Broker 意味着必须复制 topic 分区和副本，效率很低；
> 
> ### 缺乏一致性，一旦 API 发生变化很有可能出现问题； ###
> 
> 存储成本非常高，几乎没有人用Kafka长时间存储数据；
> 
> 没有与租户完全隔离的本地多租户，需要自行配置解决方案。

俯瞰技术生态，有没有一个平台，能够既拥有 Kafka 的优势，又规避它的缺陷，同时还融合了各个 MQ 的一系列特性呢？**是的，你想要的完美，下一代云原生消息平台、Apache 顶级项目 Pulsar 都可以满足！**

# 02 #

存储计算分离、分层分片云原生架构

Apache Pulsar

生来，注定是王者！

很多公司常常会在 Kafka 和 RabbitMQ 或 RocketMQ 之间做选择，这是因为在实时流式架构中，消息用例可被分为两类：队列和流。**而 Pulsar 最优秀的地方正在于此，它将队列和流合二为一，统一为消息传递模型（producer-topic-subscription-consumer）！**

也就是说，**Pulsar 不仅可以如同 Kafka 一样处理高速率实时场景，还能支持传统的标准消息队列模式**，例如多消费者和失效备援订阅等。

一个 Pulsar 系统，直接让你拥有 RabbitMQ + RocketMQ + Kafka 的各项特性！更惊艳的是，Pulsar 采用云原生架构，它的架构设计能够充分利用分布式且能弹性扩容云端资源，**永久性告别性能不足。**

![1d1b9f756614b3b36ee348d5ed330873.png][]

Pulsar 消息发送模式架构图

目前，Pulsar 已经被腾讯、智联招聘、涂鸦智能、中国移动、中国电信、360、达达集团（京东到家）、苏宁、平安证券、华为等各个领域的巨头争先广泛实践，有全面赶超 Kafka 的趋势，**和当年阿里推动 Flink 取代 Spark 的态势非常相似！**

**2021 移动互联网下半场，高并发、高吞吐已经不再是首要的痛点，几乎可以肯定 Pulsar 将会被越来越多的大厂快速应用，成为下一个风口！**

为了帮助你**快速学习、理解、掌握和实践**强悍的 Pulsar，赶超技术圈下一个高薪风口，我们特别邀请了 **StreamNative 的联合创始人，同时也是开源项目 Apache Pulsar 和 Apache BookKeeper 的 PMC 成员和 Committer 的翟佳老师**，与**奈学教育联合创始人、前58转转公司大数据资深架构师、Hadoop平台负责人李希沅老师**，推出国内首套 Pulsar 课程，打造了最新一期**《Apache Pulsar - 万亿级云原生的分布式消息平台》在线专栏课**！

![e340f100d671baa70302780418b80c26.png][]

原价 ¥499，限时0元免费学习！

![2c2b53bf2d958fc3190453e953db06aa.png][]

长按扫码????，锁定0元名额

9.8 特价报名，学满 3 天全额退费！

仅前 50 人有效，先到先得！

国内首套 Pulsar 在线专栏课**原价499，**现在花**9.8**半杯奶茶钱就能拿下，**学满3天全额退费，等于免费学好课**，绝对相当划算。12节名师精心打磨的大数据架构师必备技术知识精品课程，**5月24**** - 26日，3天速成，晚20:00-22:00点**，助你赶超下一个行业风口。

**重要提醒：**一次报名，支持不限次数、不限日期的永久回看。同时课程期间还有惊喜大奖等你免费拿，**小米体脂称、九阳早餐机、360智能摄像头等百元大礼**全部包邮送，活动真实有效！

**购课福利**

![6dcbb7b3270c44418fa1c28c6d0cb403.png][]

![db04f3240d568a34051765b16c10bf69.png][]

##  ##

12节干货实战课，带你快速掌握：

*  消息系统的架构选型；
 *  深度掌握新一代万亿级消息系统 Pulsar 的架构设计；
 *  搞定新一代万亿级消息系统 Pulsar 的核心特性；
 *  掌握 Apache BookKeeper 的核心设计；
 *  掌握大数据最新技术一手行业干货趋势、动态。

# 03 #

我为什么推荐这门课程给你

## 从 0 到 1 层层深入 Pulsar 架构核心 ##

Pulsar 通过特别的设计和抽象，统一地支持 Streaming 和 Queueing 两种消息消费模式，保持了 Streaming 模式的高性能和 Queueing 模式的灵活性。Pulsar 在保证大数据消息系统的性能和吞吐量的同时，提供了更多企业级的 Feature，包括方便的运维和扩展，灵活的消息模型，多语言API，多租户，异地多备，和数据的强持久性一致性等等，解决了现有开源消息系统的很多不足之处。

![12e70ca8341c7202e8709d41d5bd4422.png][]

总之，通过从大数据核心技术**“点”**，到 Pulsar 架构设计**“线”**，再到企业应用实践**“面”**的深度剖析，帮助同学们全方面立体掌握 Pulsar 核心技术。

## 明星级教学教研团队  带你手把手快速掌握 ##

![dbb5c0875a2b9fedd9129a9b9398b4d2.png][]

![eb32d1b6aebbff892da31e055c42ddb2.png][]

![aa681f5a7d6ad2858f17d73be63a202f.png][]

## 名师玄姐好评如潮  教研教学更有保障 ##

![undefined][]![undefined][undefined 1]

左右滑动查看更多

**![338878b7a30898c175c7f479d03d121e.png][]**

**国内首套 Pulsar 课程**

**大数据架构师必知必会**

**全面搞定 Pulsar 架构设计实践**

**掌握下一代云原生消息平台**

**12 大****节点**** 3 ****天速成精品课**

**原价499 ****限时特惠 ****9.8**

快速搞定大数据架构师必备技能！

**学满3天，全额退费！**

**????????????**

![73ec26b820738a9c6d52eadff26f3420.png][]

本公众号仅限**前50名**特惠购买

请耐心等待课程顾问通过

## 适合谁学 ##

**技术浪潮一个接一个，总会有新技术不断涌现，作为技术从业者，最怕的就是还在用老技术解决别人早就解决了的问题。**如果你是一名：

*  分布式系统开发工程师
 *  大数据平台工程师
 *  大数据研发工程师
 *  大数据架构师
 *  数据仓库工程师
 *  后端开发工程师（Java/Go/C++/PHP/Python等语言方向）
 *  架构师（大数据/云原生/平台/系统/业务等方向）

那么，这门实践精品课正是为你量身定做的！

![cfa8534b2a1137ea34e4badc17ee82ac.png][]

**用心做教育，奈学陪你共成长！**

## 关于奈学教育 ##

![df207f522a8beccbd3a5e02eaebe5d86.png][]

点击查看“阅读原文”，了解奈学教育更多课程内容！

[7b3b207eabbb93dd70a5255dba4c8839.png]: /images/20221020/e2780432644d40898e56bc24adc13665.png
[1d1b9f756614b3b36ee348d5ed330873.png]: /images/20221020/364e772c5cb34c72a45357206649187a.png
[e340f100d671baa70302780418b80c26.png]: /images/20221020/215759ba22e54543b79e7e4dd682c916.png
[2c2b53bf2d958fc3190453e953db06aa.png]: /images/20221020/c23438f504ae40c69bcae1092f3c40a1.png
[6dcbb7b3270c44418fa1c28c6d0cb403.png]: /images/20221020/220e067d8e344d87b1b46a9970d7a1fc.png
[db04f3240d568a34051765b16c10bf69.png]: /images/20221020/fbc7b81ded7e41e0b956680f277358d5.png
[12e70ca8341c7202e8709d41d5bd4422.png]: /images/20221020/15130c4bd5b74840912ede27eaa8f402.png
[dbb5c0875a2b9fedd9129a9b9398b4d2.png]: /images/20221020/79e1a5a06a164a6e8d6b5cf3c2c8f6bb.png
[eb32d1b6aebbff892da31e055c42ddb2.png]: /images/20221020/8e3947e78a2747f49ee487cdb13f280d.png
[aa681f5a7d6ad2858f17d73be63a202f.png]: /images/20221020/2d5a86b90c50429cb4f68532c759d4f8.png
[undefined]: /images/20221020/31b45c6964eb4ab0bed93d1c2c40a9e4.png
[undefined 1]: https://img-blog.csdnimg.cn/img_convert/db2db422318d36ae5cfc2f7832a2e8a5.png
[338878b7a30898c175c7f479d03d121e.png]: /images/20221020/ebe0ba0cb7b84957990d9f493eaea9ef.png
[73ec26b820738a9c6d52eadff26f3420.png]: /images/20221020/587abd026252432e8ff8b7cfc765a898.png
[cfa8534b2a1137ea34e4badc17ee82ac.png]: /images/20221020/5db4174292644521ad8e52a8fb08f2ef.png
[df207f522a8beccbd3a5e02eaebe5d86.png]: /images/20221020/7c1792e673d447f0862e755bb920a852.png