Kafka生产者的分区策略

分区原因

  • 方便在集群中的扩展。 每个分区都可以调整,适应其所在的节点,每个Topic会分为多个分区,所以整个集群就可以适应任意大小的数据。
  • 提高并发。 以partition为单位进行读写。

分区策略

在这里插入图片描述

生产者要发送的消息封装成ProducerRecord对象。根据api我们可以看到分区策略共有3种。

  1. 指定分区号。 producer的分区就是指定的分区号。
  2. 没有分区号但是指定了key。 producer的分区号由key的hash值 % 分区数量来决定。
  3. 没有分区号也没有key。 第一次调用时随机生成一个整数,后面每次调用在此整数上自增。此整数 % 分区数量的值就是分区号。也就是round-robin(轮询)算法。

猜你喜欢

转载自blog.csdn.net/FlatTiger/article/details/114114680