Comandos de operación del cliente Flink
1. Enviar tareas según el modo Yarn
Utilice el paquete jar de la plataforma para probar:
./bin/flink run -m yarn-cluster -p 2 ./examples/batch/WordCount.jar \
--input hdfs:///user/wupq/words.txt \
--output hdfs:///user/wupq/output2/2020122301
Envíe su propio código:
./bin/flink run -m yarn-cluster -yn 2 -c com.tencent.tbds.demo.KafkaSourceDemo /root/wupq/tbds-demo-1.0-SNAPSHOT.jar
Nota: la versión Flink1.12 no admite el parámetro -yn
2. ejecución de parpadeo
-c, –class Entrada a la aplicación Flink
-C, –classpath Especifica una URL a la que pueden acceder todos los nodos, que puede usarse para cargar las clases de herramientas requeridas por múltiples aplicaciones
-d, –detached Si usar el modo separado es enviar una tarea, si cli sale, si se agrega el parámetro -d, cli saldrá
-n, –allowNonRestoredState permite omitir puntos de guardado que no se pueden restaurar. Por ejemplo, elimine parte del operador de código
-p, –parallelism, ejecute paralelismo
-s, –fromSavepoint, restaure la tarea desde el punto de guardado
–sae, –shutdownOnAttachedExit, envíe en modo adjunto y apague el clúster cuando el cliente salga.
3.modo de grupo de hilos de flink
-d,–detached Si se usa el modo separado
-m,–jobmanager Especifica el administrador de trabajos enviado
-yat,–yarnapplicationType Establece el tipo de aplicación de hilo
-yD <property=value> Usa el valor de la propiedad dada
-yd,–yarndetached Usa modo separado de hilo
-yh,–yarnhelp ayuda de sesión de hilo
-yid,–yarnapplicationId Colgar en la sesión de hilo en ejecución
-yj,–yarnjar La ruta del archivo jar de Flink
-yjm,–yarnjobManagerMemoria memoria del administrador de trabajos (unidad M)
-ynl,–yarnnodeLabel Especificar Aplicación YARN Etiqueta de nodo YARN
-ynm, –yarnname Personaliza el nombre de la aplicación de hilo
-yq, –yarnquery Muestra los recursos disponibles de hilo
–yqu, –yarnqueue Especifica la cola de hilo
–ys, –yarnslots Especifica el número de ranuras para cada administrador de tareas
–yt , –yarnship Transfiere archivos en el directorio especificado
-ytm, –yarntaskManagerMemory Memoria para cada administrador de tareas
-yz, –yarnzookeeperNamespace El espacio de nombres usado para crear la subruta zk de ha
-z, –zookeeperNamespace El espacio de nombres usado para crear la subruta zk de ha
4. mucha información
información [OPCIONES]
5. lista flink (muestra programas en ejecución o programados)
-a,–all muestra todas las aplicaciones y los identificadores de trabajos correspondientes
-r,–ejecutando muestra las aplicaciones en ejecución y los identificadores de trabajos
-s,–scheduled muestra las aplicaciones programadas y los identificadores de trabajos
#yarn-cluster mode
-m,–jobmanager especifica la conexión El administrador de trabajos
- yid,–yarnapplicationId se cuelga en la sesión de hilo correspondiente al ID de hilo especificado.
-z,–zookeeperNamespace se usa para crear el espacio de nombres de la subruta zk de ha.
6. flink stop (detener una aplicación en ejecución)
-d,--drain Envía MAX_WATERMARK antes de adquirir el punto de guardado y detener la canalización
-p,--savepointPath especifica la ruta del punto de guardado. Si no se especifica, se utilizará el valor predeterminado ("state.savepoints.dir").
7.savepoint (activa una aplicación en ejecución para generar un punto de guardado)
Sintaxis: savepoint [OPCIONES] []
-d,–dispose ruta al savepoint
-j,–jarfile Paquete jar de Flink