前期准备:
- step1:安装JDK1.8
- step2:安装zookeeper3.4.9https://blog.csdn.net/qq_29425617/article/details/85266606
- step3: 安装Gradle-4.10.3https://blog.csdn.net/qq_29425617/article/details/85266509
- step4:安装scala-2.10.7https://blog.csdn.net/qq_29425617/article/details/85264283
一.kafka源码构建
完成上述准备工作后,我们在http://kafka.apache.org/下载自己所需的kafka版本,我在这里下载了kafka-0.10.0.1。解压到指定目录后,打开cmd进入该目录,输入gradle idea命令进行构建,构建过程需要从网上下载各种依赖包,时间会比较长。当出现BUILD SUCCESSFUL表示构建成功。
二.配置kafka
在kafka服务端使用log4j输出日志,启动前需要把config目录下的log4j.properties配置文件放置到src/mai/scala路径下,然后运行程序,才能正确输出日志信息。
config目录下的server.porperties是kafka的主要配置文件,我们需要修改log.dirs用于存储log文件
log.dirs=D:\\kafka-0.10.0.1-src\\kafka-logs
配置kafka的启动参数
- 配置kafka服务器
- 配置生产者
- 配置消费者
第一次启动kafka时,idea会编译整个项目,得到如下日志信息
三.验证
- 打开zookeeper和并启动kafka服务器
- 启动生产者producer
- 启动消费者consumer
- 在producer中输入你好,我们就可以在看到 这条消息出现在consumer,则表明搭建成功