Flume在进行数据采集的过程中,有哪些能够优化的地方

  • Flume的双层采集(第一层数据采集,第二层数据汇聚)
  • Channel可以使用Kafka channel,兼具File Channel和Memory Channel的优点;还可以兼具离线和实时计算。
  • Flume替换为轻量级的日志收集组件logstash(ELK套件中的L),或更轻量集的filebeat
  • Flume拦截器,可以多虑多余的数据,仅保留Json串

猜你喜欢

转载自blog.csdn.net/abc5254065/article/details/112853537