问题描述
spark本地代码测试出现如下bug
ERROR Shell: Failed to locate the winutils binary in the hadoop binary path
java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries.
解决方案
谷歌下载并安装插件:GitZip
然后去GitHub上一个winutils里下载
下载完后放到某个目录下:
配置环境变量:
HADOOP_HOME
path里配置环境变量:
%HADOOP_HOME%\bin
然后重新运行就没有这个错误了。