Kafka+Spark 小测

1kafka的幂等性 @

  • 幂等,就是指多接口的多次调用所产生的结果和只调用一次是一致的。没有幂等性的情况下就会重复发送数据
  • 在这里插入图片描述
  • kafka的幂等性机制能保证单个分区不会重复写入数据,而实现幂等性的核心就是引入了producerid和sequence number这两个概念
  • 判断流程
    每个新的生

猜你喜欢

转载自blog.csdn.net/weixin_45747607/article/details/121956713