Apache Kafka学习 (二) - 多代理(broker)集群

叁歲伎倆 2021-12-24 13:33 188阅读 0赞

**1. 配置server.properties**

> cp config/server.properties config/server-1.properties  
> cp config/server.properties config/server-2.properties

**2. 编辑server.properties**

config/server-1.properties:

\------------------------------------------------

broker.id=1  
listeners=PLAINTEXT://:9093  
log.dir=/tmp/kafka-logs-1

\------------------------------------------------

config/server-2.properties:

\------------------------------------------------

broker.id=2  
listeners=PLAINTEXT://:9094  
log.dir=/tmp/kafka-logs-2

\------------------------------------------------

**3. 我们如果已经启动了zookeeper和一个9092的单节点，那么只要再启动那两个新节点就好了**

*（We already have Zookeeper and our single node started, so we just need to start the two new nodes）*

> bin/kafka-server-start.sh config/server-1.properties &  
...  
> bin/kafka-server-start.sh config/server-2.properties &  
...

**4. 新建一个有3个复制的主题**

> bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 3 --partitions 1 --topic my-replicated-topic

**5. 查看主题**

> bin/kafka-topics.sh --describe --zookeeper localhost:2181 --topic my-replicated-topic

**6. 发布主题的消息**

> bin/kafka-console-producer.sh --broker-list localhost:9092 --topic my-replicated-topic

**7. 测试容错机制**

> ps aux | grep server-1.properties

7564 ttys002 0:15.91 /System/Library/Frameworks/JavaVM.framework/Versions/1.8/Home/bin/java...  
> kill -9 7564

**8. 消费主题的消息**

> bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --from-beginning --topic my-replicated-topic

转载于:https://www.cnblogs.com/davidgu/p/6598145.html

发表评论取消回复

表情：

评论列表（有 0 条评论，188人围观）

还没有评论，来说两句吧...

相关阅读

相关大数据-kafka学习（三）——Kafka Broker

目录一、Kafka Broker工作 1.1 、zookeeper中存储的kafka信息 1.2、broker总体工作流程二、kafka副本 2.1、副本的基本信

我就是我/ 2023年09月30日 12:59/ 0 赞/ 69 阅读

相关 Kafka集群搭建二

1、集群启动脚本，目前只用192.168.2.131 （主机名master）,192.168.2.130(主机名slave1) !/bin/bash zkPa

我会带着你远行/ 2023年02月15日 13:48/ 0 赞/ 20 阅读

相关 kafka详解二：如何配置kafka集群

[http://www.360doc.com/content/17/1020/10/16915\_696580124.shtml][http_www.360doc.com_co

缺乏、安全感/ 2022年09月10日 01:26/ 0 赞/ 196 阅读

相关 Kafka（二）： Kafka 集群部署与使用

一、Kafka 集群部署 Kafk

秒速五厘米/ 2022年06月15日 02:13/ 0 赞/ 195 阅读

相关 kafka、zk集群二

一、Zookeeper集群安装要求： zookeeper的 jdk 要 6以上 zookeeper生产环境版本为 3.4.8 1.首先编辑/Etc/Hosts 1.

淩亂°似流年/ 2022年06月03日 04:45/ 0 赞/ 194 阅读

相关 kafka集群的安装（二）----zookeeper集群

一、kafka集群书接前文 [zookeeper下载地址][zookeeper] 先将下载的zookeeper上传到服务器，解压。

待我称王封你为后i/ 2022年05月18日 08:09/ 0 赞/ 300 阅读

相关《Apache kafka实战》读书笔记-kafka集群监控工具

　　　　　　　　　　　　　　　《Apache kafka实战》读书笔记-kafka集群监控工具　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　

朴灿烈づ我的快乐病毒、/ 2022年03月27日 14:12/ 0 赞/ 259 阅读

相关 Apache Kafka学习 (二) - 多代理(broker)集群

1. 配置server.properties > cp config/server.properties config/server-1.properties > cp

叁歲伎倆/ 2021年12月24日 13:33/ 0 赞/ 189 阅读

相关 Apache Kafka 集群部署指南

公众号关注「开源Linux」回复「学习」，有我为您特别筛选的学习资料~ ![format_png][] Kafka基础 ![format_png 1][]

我就是我/ 2021年07月26日 11:16/ 0 赞/ 382 阅读

相关 centos7搭建zookeeper和kafka集群，kafka学习二

> Kafka是分布式发布-订阅消息系统，它最初是由LinkedIn公司开发的，之后成为Apache项目的一部分，Kafka是一个分布式，可划分的，冗余备份的持久性的日志服务，

灰太狼/ 2021年05月10日 11:13/ 0 赞/ 730 阅读