linux下安装kafka 及集群的简单搭建

linux下安装kafka

安装条件:

确保zookeeper已经安装成功。zookeeper安装过程见:https://www.cnblogs.com/expiator/p/9853378.html

1.下载kafka
进入Apache官网   http://kafka.apache.org/downloads.html

选择Binary downloads,选择版本进行下载。

也可以直接用以下命令下载:

 wget http://apache.01link.hk/kafka/2.0.0/kafka_2.11-2.0.0.tgz


2.解压下载的kafka

cd  /usr/local
tar -xzf kafka_2.11-2.0.0.tgz cd kafka_2.11-2.0.0


3. 启动服务
3.1 启动zookeeper
启动zk有两种方式,第一种是使用kafka自己带的一个zk。

bin/zookeeper-server-start.sh  config/zookeeper.properties 


另一种是使用其它的zookeeper,可以位于本机也可以位于其它地址。

这种情况需要修改config下面的sercer.properties里面的zookeeper地址 。例如zookeeper.connect=192.168.213.11:2181

成功启动zookeeper后才可以启动kafka。


3.2 启动 kafka

 bin/kafka-server-start.sh config/server.properties
后台启动
./bin/kafka-server-start.sh -daemon config/server.properties


4.创建topic

[root@bogon kafka_2.11-2.0.0]# 

bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

创建一个名为test的topic,只有一个副本,一个分区。

通过list命令查看刚刚创建的topic

bin/kafka-topics.sh -list -zookeeper localhost:2181


5.启动producer并发送消息启动producer

[root@bogon kafka_2.11-2.0.0]#
 bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test


启动之后就可以发送消息了

比如

test

hello boy


6.然后在另一个终端中,启动consumer

以下是旧版本的命令:

bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic test --from-beginning

报错:consumer zookeeper is not a recognized option
发现在启动的时候说使用 --zookeeper是一个过时的方法,最新的版本中命令如下:

bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning

启动consumer之后就可以在console中看到producer发送的消息了

可以开启两个终端,一个发送消息,一个接受消息。

集群的搭建
单机的

复制多分server.proper,在启动

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
OK

猜你喜欢

转载自blog.csdn.net/qq_40597878/article/details/88994194