la formación de sistemas de procesamiento y distribución de combate grande de datos Apache NIFI

Objetivo
gran equipo de desarrollo de datos, grandes equipos de operaciones de datos, personal de recogida de datos y ETL, el gobierno de datos y personal de gestión

Esquema del curso

El tema
Módulo 1: principios y la arquitectura NIFI

Nifi visión general de las características de
los principios y la arquitectura NIFI
módulo básico Nifi describe
Nifi Grupos, el procesador, la cola y el módulo conector describe
Nifi barra de herramientas de interfaz de demostración

Módulo 2: Instalación y configuración Nifi

Nifi instalación independiente
Nifi instalación distribuida
Nifi esclavos de la configuración nodal
tolerancia a la pérdida de datos y asegurar la entrega de
baja latencia y alto rendimiento
prioridad dinámica
de flujo pueden ser modificados en tiempo de ejecución

Módulo 3: GUI operación Introducción

Diseño sin costuras experiencia, control y seguimiento
del procesador de crear, detener, iniciar, reiniciar, eliminar y otras operaciones

Módulo 4: Nifi viene Procesadores

principios de procesador y funciones del
procesador de Kafka Introducción y práctico
procesador de JMS Introducción y práctica
hbase, Cassandera, Redis presentaciones de procesador y práctico
procesador de HDF, chispa Streaming combate
Procesador JDBC Introducción y práctica
de FTP, HTTP, XML, JSON procesador Introducción y combatir

Módulo 5: Creación de un flujo de datos Nifi

Crear un envío / recepción directorio
getFile y PUTFILE Procesador crear
crear archivos de copia recibida desde el transmisor en la
creación de cola de la cola

Módulo 6: Creación de Advanced Stream

nombre de archivo personalizado
para agregar propiedades personalizadas
para añadir una expresión regular
para lograr el filtrado de reglas de ruta

Módulo 7: Seguridad Nifi

Crear usuarios, grupos, roles,
SSL, SSH, HTTPS cifrado y autenticación
conectable autenticación / autorización basada en roles
basados autenticación y autorización de webUI SLA

Módulo 8: Creación de procesador Nifi

Lograr un Kafka, JMS a HDFS diseño de procesos
Ver las Ejecutar Iniciar
monitor de visión

Módulo 9: configuración de clúster Nifi y gestión

Añadir NIFI nodos del clúster
nodos de borrado
optimización del rendimiento Nifi
carga nodo esclavos configuración de equilibrio
para desarrollar procesador específico a un nodo nodo específico
de configuración de equilibrio de carga dinámica de clúster

Módulo 10: procesador definida por el usuario

proyecto Eclipse creado
para conseguir una función FilterFileProcessor
de compilación y Nifi añade a la lib continuación
para crear un procesador filtraArchivo definida por el usuario

Módulo 11: Nifi combate

su uso en combate Nifi de Internet
cuota de Nifi en el caso real de un gran banco comercial

Supongo que te gusta

Origin blog.51cto.com/14767491/2481840
Recomendado
Clasificación