极客时间专栏：kafka核心技术与实战

• kafka是消息引擎也是流处理平台streams
• 更好的实现端到端
• kafka connect组件
• apache kafka是基础
• CDH/HDP Kafka，大数据云公司提供的Kafka，内嵌Apache Kafka。优势在于操作简单，节省运维成本；缺陷在于把控度低，演进速度较慢。
• grafana+prometheus+kafka Exporter
• 多个kafka同时使用zk就需要设置chroot，是zk的概念类似于别名
• Producer端压缩、Broker端保持、Consumer端解压缩。
• zstd压缩比高，对带宽要求高的情况下适合
• kafka只对以提交的消息做有限度的保证
• 只要保证有一个broker存活就能保证消息不丢失
• Producer永远要使用带有回调通知的发送API，也就是说不要使用producer.send(msg)，而要使用producer.send(msg, callback)。