Hadoop、Spark处理小文件

版权声明:个人 https://blog.csdn.net/csdnmrliu/article/details/82862133

注:hadoop基于2.7.5;spark基于2.3.1-hadoop2.7-scala2.11.8

1.hadoop处理小文件(提升mapreduce性能,没有解决namenode内存问题)

2.spark处理小文件

猜你喜欢

转载自blog.csdn.net/csdnmrliu/article/details/82862133