HRC
CDHはじめに
ApacheのHadoopのの不備
- バージョン管理の混乱
- 展開プロセスの煩雑な、複雑なアップグレードプロセス
- 悪いの互換性
- セキュリティが低く、
CDHはじめに
- Webベースのユーザインタフェース
- これは、Hadoopののコアを提供します
- 素早くビルドHadoopクラスタ
- クラスタ管理のための
- アップグレードするために簡単にHadoop
- Hadoopのハイブ、habase、カフカ、火花と互換性のある他の新バージョン
CDHチャート
CDHのインストール
- Clouderaのマネージャ(推奨)
- yumを
- RPM
- tarボール
CDHダウンロード
- HRC
http://archive.cloudera.com/cdh5/
- Clouderaのマネージャー
http://archive.cloudera.com/cm5/cm/5/
Clouderaのマネージャー
- Clouderaの管理者は、管理CDHエンドアプリケーションであります
- 効果
- 管理
- モニター
- 診断
- 統合されました
Clouderaのマネージャのインストール
システム環境の準備
- ネットワーク設定
- viのは/ etc / sysconfig / networkファイル
-
VIの/ etc / hosts
-
SSHキーフリー着陸
-
SSH-keygenは-t dsaを-P '' -fの〜/ .ssh / id_dsaに
-
猫〜/ .SH / IDのdsa.pub >>の〜/ .ssh /認可キー
-
ファイアウォールをオフにします
-
サービスのiptablesの停止
-
chkconfigをオフiptablesの
-
SELINUX閉じます
-
viのは/ etc / selinuxを/ configに(SELINUX =無効)
-
JDKのインストール設定の環境変数
-
輸出JAVA HOME = /データ/ jdk1.8.0 221
-
エクスポートパスは$ PATHを=:$ JAVA_HOME / binに
-
インストールNTP
-
yumのNTP -yをインストール
-
MySQLをインストールします。
-
サードパーティの依存関係をダウンロード
CMのインストール
- インストールClouderaの管理サーバ、エージェント
- ます。mkdir -pは/ opt / Clouderaのマネージャー
-
タールxvzf Clouderaのマネージャー-centos7-cm5.15.1 のx86 64.tar.gz -Cは/ opt / Clouderaのマネージャー
-
ユーザーClouderaの-SCMを作成します。
-
useraddの--system --no-作成-ホーム--shell = / binに/偽--comment "ClouderaのSCMユーザー" Clouderaの-SCM
-
設定CMエージェント
-
我々/opt/cloudera-manager/cm-5.15.1/etc/cloudera-scm-agent/config.ini
-
SERVER_HOST = CDH1
-
SERVER_PORT = 7182
-
CMサーバの設定
-
コピー/usr/share/java/mysql-connector-java.jar
-
許可を付与します。
-
GRANT ALL PRIVILEGES ONは。 TO 'SCM' @ '%' WITH GRANT OPTIONを'SCM'によって識別されます。フラッシュ権限;
-
/opt/cloudera-manager/cm-5.15.1/share/cmf/schema/scmは準備 database.sh MySQLの-h 172.27.0.2 -uscm -pscm --scmホストVM02centos SCM SCM SCM
-
フォーマット:データベースタイプ、データベース、データベースサーバー、ユーザー名、パスワード、CMサーバサーバ
-
ディレクトリ小包を作成します。
-
サーバ・ノード
-
ます。mkdir -pは/ opt / Clouderaの/小包、レポ
-
chownコマンドClouderaの-SCM:Clouderaの-SCMは/ opt / Clouderaの/小包、レポ
-
エージェントノード
-
ます。mkdir -pは/ opt / Clouderaの/小包
-
chownコマンドClouderaの-SCM:Clouderaの-SCMは/ opt / Clouderaの/小包
-
CDHソースの現地生産
-
/ opt / Clouderaの/小包-レポに格納されたファイルをダウンロード
-
CDH-5.15.1-1.cdh5.15.1.p0.4-el7.parcel
-
CDH-5.15.1-1.cdh5.15.1.p0.4-el7.parcel.sha
-
manifest.jsonを
-
スタートCMサーバ、エージェント
-
スタート/opt/cloudera-manager/cm-5.15.1/etc/init.d/cloudera-scm-server
-
/opt/cloudera-manager/cm-5.15.1/etc/init.d/cloudera-scm-agent開始
-
CDHクラスタのインストール - 設定ページ
-
スタート完全な
-
http:// IP:7180 / CMF /ログイン
-
デフォルトのユーザ名とパスワード:管理者/管理者