kafka配置文件详解之:server.properties

#每一个broker在集群中的唯一表示,要求是正数。当该服务器的IP地址发生改变时,broker.id没有变化,则不会影响consumers的消息情况
broker.id=0
 
#broker server服务端口  
port =9092
 
#处理网络请求的线程数量
num.network.threads=2  
 
#broker处理磁盘IO的线程数,数值应该大于你的硬盘
num.io.threads=8  
 
#发送套接字的缓冲区大小
socket.send.buffer.bytes=102400  
 
#接收套接字的缓冲区大小
socket.receive.buffer.bytes=102400 
 
#请求套接字的缓冲区大小
socket.request.max.bytes=104857600  
 
#kafka运行日志存放的路径
log.dirs=/export/data/kafka/logs  
 
#topic在当前broker上的分片个数
num.partitions=2  
 
#用来恢复和清理data下数据的线程数量
num.recovery.threads.per.data.dir=1
 
 
#segment文件保留的最长时间,超时会被删除
log.retention.hours=168  
 
#滚动生成新的segment文件的最大时间
log.roll.hours=168 
 
#日志文件中每个segment的大小默认1G
log.segment.bytes=1073741824
 
#周期性检查文件大小的时间
log.retention.check.interval.ms=60000  
 
#日志清理是否打开
log.cleaner.enable=false  
  
#(重要)broker需要使用zookeeper保存meta数据
zookeeper.connect=zk01:2181,zk02:2181,zk03:2181
 
#zookeeper链接超时时间
zookeeper.connection.timeout.ms=6000
 
#partion buffer中,消息条数达到阈值,将触发flush到磁盘
log.flush.interval.messages=10000
 
#消息buffer时间,达到阈值,将触发flush到磁盘
log.flush.interval.ms=3000
 
#不设置,只是标记删除
delete.topic.enable=true
 
#此处为本机IP,(重要)
host.name=kafka01

参数

说明(解释)

broker.id =0

每一个broker在集群中的唯一表示,要求是正数。当该服务器的IP地址发生改变时,broker.id没有变化,则不会影响consumers的消息情况

log.dirs=/data/kafka-logs

kafka数据的存放地址,多个地址的话用逗号分割/data/kafka-logs-1,/data/kafka-logs-2

port =9092

broker server服务端口

message.max.bytes =6525000

表示消息体的最大大小,单位是字节

num.network.threads =4

broker处理消息的最大线程数,一般情况下不需要去修改

num.network.threads =4

broker处理消息的最大线程数,一般情况下不需要去修改

num.io.threads =8

broker处理磁盘IO的线程数,数值应该大于你的硬盘数

background.threads =4

一些后台任务处理的线程数,例如过期消息文件的删除等,一般情况下不需要去做修改

queued.max.requests =500

等待IO线程处理的请求队列最大数,若是等待IO的请求超过这个数值,那么会停止接受外部消息,应该是一种自我保护机制。

host.name

broker的主机地址,若是设置了,那么会绑定到这个地址上,若是没有,会绑定到所有的接口上,并将其中之一发送到ZK,一般不设置

socket.send.buffer.bytes=100*1024

socket的发送缓冲区,socket的调优参数SO_SNDBUFF

https://blog.csdn.net/ustc_zn/article/details/54880818

猜你喜欢

转载自blog.csdn.net/nmjhehe/article/details/84197006
今日推荐