CDHはじめとインストール

HRC

CDHはじめに

ApacheのHadoopのの不備

  • バージョン管理の混乱
  • 展開プロセスの煩雑な、複雑なアップグレードプロセス
  • 悪いの互換性
  • セキュリティが低く、

CDHはじめに

  • Webベースのユーザインタフェース
  • これは、Hadoopののコアを提供します
  • 素早くビルドHadoopクラスタ
  • クラスタ管理のための
  • アップグレードするために簡単にHadoop
  • Hadoopのハイブ、habase、カフカ、火花と互換性のある他の新バージョン

CDHチャート

CDHのインストール

  • Clouderaのマネージャ(推奨)
  • yumを
  • RPM
  • tarボール

CDHダウンロード

  • HRC

http://archive.cloudera.com/cdh5/

  • Clouderaのマネージャー

http://archive.cloudera.com/cm5/cm/5/

Clouderaのマネージャー

  • Clouderaの管理者は、管理CDHエンドアプリケーションであります
  • 効果
    • 管理
    • モニター
    • 診断
    • 統合されました

Clouderaのマネージャのインストール

システム環境の準備

  • ネットワーク設定
  • viのは/ etc / sysconfig / networkファイル
  • VIの/ etc / hosts

  • SSHキーフリー着陸

  • SSH-keygenは-t dsaを-P '' -fの〜/ .ssh / id_dsaに

  • 猫〜/ .SH / IDのdsa.pub >>の〜/ .ssh /認可キー

  • ファイアウォールをオフにします

  • サービスのiptablesの停止

  • chkconfigをオフiptablesの

  • SELINUX閉じます

  • viのは/ etc / selinuxを/ configに(SELINUX =無効)

  • JDKのインストール設定の環境変数

  • 輸出JAVA HOME = /データ/ jdk1.8.0 221

  • エクスポートパスは$ PATHを=:$ JAVA_HOME / binに

  • インストールNTP

  • yumのNTP -yをインストール

  • MySQLをインストールします。

  • サードパーティの依存関係をダウンロード

CMのインストール

  • インストールClouderaの管理サーバ、エージェント
  • ます。mkdir -pは/ opt / Clouderaのマネージャー
  • タールxvzf Clouderaのマネージャー-centos7-cm5.15.1 のx86 64.tar.gz -Cは/ opt / Clouderaのマネージャー

  • ユーザーClouderaの-SCMを作成します。

  • useraddの--system --no-作成-ホーム--shell = / binに/偽--comment "ClouderaのSCMユーザー" Clouderaの-SCM

  • 設定CMエージェント

  • 我々/opt/cloudera-manager/cm-5.15.1/etc/cloudera-scm-agent/config.ini

  • SERVER_HOST = CDH1

  • SERVER_PORT = 7182

  • CMサーバの設定

  • コピー/usr/share/java/mysql-connector-java.jar

  • 許可を付与します。

  • GRANT ALL PRIVILEGES ONは TO 'SCM' @ '%' WITH GRANT OPTIONを'SCM'によって識別されます。フラッシュ権限; 

  • /opt/cloudera-manager/cm-5.15.1/share/cmf/schema/scmは準備 database.sh MySQLの-h 172.27.0.2 -uscm -pscm --scmホストVM02centos SCM SCM SCM

  • フォーマット:データベースタイプ、データベース、データベースサーバー、ユーザー名、パスワード、CMサーバサーバ

  • ディレクトリ小包を作成します。

  • サーバ・ノード

  • ます。mkdir -pは/ opt / Clouderaの/小包、レポ

  • chownコマンドClouderaの-SCM:Clouderaの-SCMは/ opt / Clouderaの/小包、レポ

  • エージェントノード

  • ます。mkdir -pは/ opt / Clouderaの/小包

  • chownコマンドClouderaの-SCM:Clouderaの-SCMは/ opt / Clouderaの/小包

  • CDHソースの現地生産

  • / opt / Clouderaの/小包-レポに格納されたファイルをダウンロード

  • CDH-5.15.1-1.cdh5.15.1.p0.4-el7.parcel 

  • CDH-5.15.1-1.cdh5.15.1.p0.4-el7.parcel.sha 

  • manifest.jsonを

  • スタートCMサーバ、エージェント

  • スタート/opt/cloudera-manager/cm-5.15.1/etc/init.d/cloudera-scm-server

  • /opt/cloudera-manager/cm-5.15.1/etc/init.d/cloudera-scm-agent開始

  • CDHクラスタのインストール - 設定ページ

  • スタート完全な

  • http:// IP:7180 / CMF /ログイン

  • デフォルトのユーザ名とパスワード:管理者/管理者

おすすめ

転載: www.cnblogs.com/sallyluo/p/11898261.html