記事著者の電子メール: [email protected] 住所: 広東省恵州市
▲ この章のプログラム
⚪ Flume による Web サイトトラフィックプロジェクトのマスター—>Kafka 接続。
⚪ ウェブサイトトラフィックプロジェクトのリアルタイムビジネスシステム構築をマスターします。
1. Flume—>Kafka の接続
1. 導入手順
1. 3 つのサーバーを起動します。
2. Zookeeper クラスターを開始します。
実行命令:
sh /home/software/zookeeper-3.4.8/bin/zkServer.sh start
3. Kafka クラスターを開始します。
4. Kafka トピックを作成します。
実行命令:
sh kafka-topics.sh --create --zookeeper hadoop01:2181
--replication-factor 1 --partitions 1 --topic fluxdata
5. Hadoopを起動します。
6. flume を設定して起動します。
flume のデータ ディレクトリで次のコマンドを実行します。
../bin/flume-agent -na1 -c ./ -f ./weblog.conf
-Dflume.root.logger = 情報、コンソール
weblog.conf 設定ファイルの例は次のとおりです。
a1.ソース = r1