Sqoop-- 1.原則とアーキテクチャ

sqoopは、Apacheツール「のHadoopとリレーショナルデータベースサーバ間の転送データ」ですです。インポート、移動:2つのコア機能があります。データをインポートする:MySQLの、OracleのインポートデータをHadoopのHDFS、HIVE、HBaseの他のデータ・ストレージ・システムに。エクスポートデータ:例えばMySQLのSqoop又はコマンドラインツール、およびHDFSなどのリレーショナル・データベースへのHadoopファイルシステムデータの性質から輸出、ハイブを比較し、無深い理論。道sqoop基本的に移行データ移行は:MR手順にsqoop移行コマンドを変換することです
ハイブは、基本的に店のデータはHDFSに依存して、SQLプログラムがMRに変換し、計算を実行します。
ここに画像を挿入説明
MapReduceのは、主のInputFormatとOUTPUTFORMATカスタマイズに翻訳でのMapReduceプログラムに翻訳インポートまたはエクスポートコマンドが実装されています。

---- Blueicex 2020年3月17日午前11時45分[email protected]

彼は188元記事に公開 ウォンの賞賛1 ビュー6791を

おすすめ

転載: blog.csdn.net/blueicex2017/article/details/104918345