logstash書き込みkakfaデータ損失

logstashに送信metricbeat取得システムメトリックは、その後カフカ書き込み、カフカ検出データが不完全である、唯一の指標、

その理由を見つけ、次のように、符号化問題logstashた構成であることが判明:

入力{
  ビート{
    ポート => 5044
  }
}

出力{
  カフカ{
    bootstrap_servers => "192.168.16.201:9095" 
    コーデック => "JSON" 
    topic_id => "テスト" 
  } 
}

以前書いていないコーデック=>「JSONを」指標のmetricbeatコレクションはJSONオブジェクトであるため、コーデックですJSON変更するにはカフカを書くようにする場合それ以外のメッセージには、いくつかのデータを失うことになるカフカが書かれています、、、。

おすすめ

転載: www.cnblogs.com/blue-rain/p/12407733.html