(4)ビッグデータの取得のHadoopクラスタのセットアップ

1、サーバーの準備ができて

参考:()大規模なデータを取得する環境を設定、VMware15 + CentOS8.1設定

2、JDKのインストール環境

参考:大規模なデータ入力(2)Centos8、JDKの設定

3、ネットワーク環境を準備します

参考:大規模なデータ入力(C)CentOSのネットワーク設定

4、クラスタセットアップ

(1)製造例3クライアント

構成された仮想マシンのクローン作成の前に、
ここに画像を挿入説明
ここに画像を挿入説明
ここに画像を挿入説明
ここに画像を挿入説明
二度あったクローン化:
ここに画像を挿入説明
3つのホストが開いて、コマンドのIPはあなたがIPを設定する場合は、ここで注意することは変わり使用ip addrビュー発見が変更されていないIP、あなたが再起動する必要があります。

#仅需要对克隆的主机进行修改
#修改ip
vi /etc/sysconfig/network-scripts/ifcfg-ens33
#修改主机名
hostnamectl set-hostname  node2
hostnamectl set-hostname  node3

このような宿主によるアクセスのためのホストではなく、アクセスの間にその設定のホスト、IP

[root@node1 ~]# vi /etc/hosts
配置主机host
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
192.168.100.21 node1
192.168.100.22 node2
192.168.100.23 node3

ここに画像を挿入説明
同期設定:

scp -r /etc/hosts root@node2:/etc/
scp -r /etc/hosts root@node3:/etc/

ここに画像を挿入説明
pingテスト:
ここに画像を挿入説明
同期時には上記の構成、またはアクセスにパスワードを要求するには、SSHログインのない密を設定する必要がある、各ホストを設定する必要があります。

ssh-keygen -t rsa
ssh-copy-id node1
ssh-copy-id node2
ssh-copy-id node3

Hadoopのアーカイブをダウンロードしますhttps://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-2.7.7/hadoop-2.7.7.ta​​r.gz

参照

Hadoopの(2)CentOS7.5ビルドHadoop2.7.6完全分散型クラスタ
のLinuxおよびクローニングのCentOS7.5のインストール

リリース5元の記事 ウォンの賞賛3 ビュー183

おすすめ

転載: blog.csdn.net/qq_34391511/article/details/104885278