Prueba de lectura y escritura de Yarn-HDFS

Prueba de lectura y escritura HDFS

1.prueba de escritura hdfs

yarn jar /usr/local/service/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-2.8.5.jar  TestDFSIO -write -nrFiles 10 -size 100MB

Descripción del parámetro:
-write: escritura de prueba
-nrFiles 10: escribe 10 archivos
-size 10MB: 10MB para cada archivo
– ver los datos de prueba generados
hdfs dfs -ls /benchmarks/TestDFSIO/io_data

2.prueba de lectura hdfs

yarn jar /usr/local/service/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-2.8.5.jar  TestDFSIO -read -nrFiles 10 -size 1MB

Supongo que te gusta

Origin blog.csdn.net/qq_42264264/article/details/130828885
Recomendado
Clasificación