Broker 保存消息

  • 存储方式

    • 物理上把 topic 分成一个或多个 patition,每个 patition 物理上对应一个文件夹(该文件夹存储该 patition 的所有消息和索引文件)
  • 存储策略

    • 无论消息是否被消费,kafka 都会保留所有消息。有两种策略可以删除旧数据:

      • 基于时间:log.retention.hours=xxx

      • 基于大小:log.retention.bytes=xxx

需要注意的是,因为 Kafka 读取特定消息的时间复杂度为 O(1),即与文件大小无关,所以这里删除过期文件与提高 Kafka 性能无关

猜你喜欢

转载自www.cnblogs.com/xiangyuguan/p/11311476.html