w10 使用idea基于maven跑wordcount

流程是照着这个搞得

https://www.polarxiong.com/archives/Hadoop-Intellij%E7%BB%93%E5%90%88Maven%E6%9C%AC%E5%9C%B0%E8%BF%90%E8%A1%8C%E5%92%8C%E8%B0%83%E8%AF%95MapReduce%E7%A8%8B%E5%BA%8F-%E6%97%A0%E9%9C%80%E6%90%AD%E8%BD%BDHadoop%E5%92%8CHDFS%E7%8E%AF%E5%A2%83.html

有两大问题:

1、权限问题

Failed to set permissions of path: tmp问题,有简单解决办法。

换hadoop-core的版本换成0.20.2版本。直接改pom文件中<version>1.2.1</version>这行改成<version>0.20.2</version>,相应的main方法里面的 Job job = Job.getInstance(conf, "word count");也要改成Job job = new Job(conf, "word count");就可以了。

2、Cannot run program "chmod": CreateProcess error=2问题

参考 https://blog.csdn.net/sinoyang/article/details/8011626   文中的添加环境变量,就是把那个目录加到path里的意思

猜你喜欢

转载自blog.csdn.net/leokingszx/article/details/80172487