Sqoop-- 1. Principios y arquitectura

Sqoop es Apache es un "transferir datos entre Hadoop y relacional del servidor de base de datos" de la herramienta. Hay dos funciones básicas: Importación, movidos. La importación de datos: datos de importación de MySQL, Oracle en el Hadoop HDFS, colmena, hbase otro sistema de almacenamiento de datos. Los datos de exportación: exportación de la naturaleza de los datos Hadoop sistema de archivos a una base de datos relacional como MySQL Sqoop o una herramienta de línea de comandos, y HDFS, Colmena comparación, y ninguna teoría profunda. Sqoop manera la migración de datos de migración esencialmente: es convertir comando Sqoop migración a procedimientos de RM
. Colmena esencialmente realizar cálculos, almacenar datos depende de HDFS, el programa SQL se convierte en MR.
Aquí Insertar imagen Descripción
Importación o exportación de comandos traducidos al programa de MapReduce se implementa en el MapReduce tradujo principalmente en la personalización y InputFormat OutputFormat.

---- Blueicex 17/03/2020 11:45 [email protected]

Ha publicado 188 artículos originales · ganado elogios 1 · vistas 6791

Supongo que te gusta

Origin blog.csdn.net/blueicex2017/article/details/104918345
Recomendado
Clasificación