Windows下使用eclipse插件访问hdfs出错,用户名不一致的问题

本文转载至:https://blog.csdn.net/worldchinalee/article/details/80974544
错误原因:
org.apache.hadoop.security.AccessControlException: org.apache.hadoop.security .AccessControlException: Permission denied: user=Administrator, access=WRITE, inode=”hadoop”: hadoop:supergroup:rwxr-xr-x
使用eclipse访问hdfs发现自己电脑的用户名是Administrator,而hdfs的访问权限要求用户名是hadoop。
解决方案:
1、windows下配置环境变量,里面添加HADOOP_USER_NAME,这个值具体等于多少看自己的情况,以后会运行HADOOP上的Linux的用户名。(修改完重启eclipse,不然可能不生效)

2、将当前系统的帐号修改为hadoop

3、使用HDFS的命令行接口修改相应目录的权限,hadoop fs -chmod 777 /user,后面的/user是要上传文件的路径,不同的情况可能不一样,比如要上传的文件路径为hdfs://namenode/user/xxx.doc,则这样的修改可以,如果要上传的文件路径为hdfs://namenode/java/xxx.doc,则要修改的为hadoop fs -chmod 777 /java或者hadoop fs -chmod 777 /

4.hdfs中利用api配置
1) run as >>> run configuration 配置代码提交的时候的运行参数
提交参数指定的时候 k-v k=v HADOOP_USER_NAME 指定用户名的 vm arguments -DHADOOP_USER_NAME=hadoop
2)在代码中指定
1)System对象指定 在代码的最开始设置
System.setProperty(“HADOOP_USER_NAME”, “hadoop”);
2)conf.set(“HADOOP_USER_NAME”, “hadoop”); 一定在fs对象构建之前
在构建fs对象的时候指定
3)FileSystem fs=FileSystem.get(new URI(“hdfs://hadoop01:9000”), conf, “hadoop”);

猜你喜欢

转载自blog.csdn.net/qq_41302130/article/details/81913200