HDFS 구성
참조 문서 : http://archive.cloudera.com/cdh5/cdh/5/hue-3.9.0-cdh5.5.0/manual.html
하둡 구성 파일 수정
HDFS-site.xml 파일
<특성>
<이름> dfs.webhdfs.enabled </ 이름>
<값> 진정한 </ 값>
</ 속성>
코어 site.html
<특성>
<이름> hadoop.proxyuser.hue.hosts </ 이름>
<값> * </ 값>
</ 속성>
<특성>
<이름> hadoop.proxyuser.hue.groups </ 이름>
<값> * </ 값>
</ 속성>
HUE는 설정 파일을 수정
[[hdfs_clusters]] [[[기본 설정]]]
fs_defaultfs = HDFS : // MyCluster라는
webhdfs_url = HTTP : // 노드 1 : 50070 / webhdfs / V1
hadoop_bin =는 / usr / 하둡-2.5.1 / 빈
hadoop_conf_dir =는 / usr / 하둡-2.5.1을 / etc / 하둡
색조를 다시 시작 HDFS 시작
웹 액세스
해결 방법 :
기본 사용자 액세스 HDFS 수정
구성 hue.ini 수정
default_hdfs_superuser = HDFS
변경
default_hdfs_superuser = 루트
다시 시작 색조
HDFS는, 추가, 삭제, 변경 및 기타 작업, HUE 파일 브라우저 파일에 의해 작동 할 수 있습니다.
그러나 내용에 이상이있는 파일을 수정, 로그 파일을 보려면 :
해결 방법 :
1, 폐쇄 HDFS 권한 검증
HDFS-site.xml 파일
<특성>
<이름> dfs.permissions.enabled </ 이름>
<값> 거짓 </ 값>
</ 속성>
HDFS와 색조를 다시 시작해야
2, 색상의 색조가 루트 사용자를 작성하고 루트로 로그인합니다.
원사 구성
HUE는 설정 파일을 수정
[[yarn_clusters]] [[[기본 설정]]]
resourcemanager_host = 노드 1
resourcemanager_port = 8032
submit_to = TRUE
resourcemanager_api_url = HTTP : // 노드 1 : 8088
HUE 서비스를 다시 시작
테스트 프로그램 workcout을 실행
하둡 항아리 /usr/hadoop-2.5.1/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.5.1.jar 단어 수 / 테스트 / WC / 입 / OUT1
HDFS 구성
참조 문서 : http://archive.cloudera.com/cdh5/cdh/5/hue-3.9.0-cdh5.5.0/manual.html
하둡 구성 파일 수정
HDFS-site.xml 파일
<특성>
<이름> dfs.webhdfs.enabled </ 이름>
<값> 진정한 </ 값>
</ 속성>
코어 site.html
<특성>
<이름> hadoop.proxyuser.hue.hosts </ 이름>
<값> * </ 값>
</ 속성>
<특성>
<이름> hadoop.proxyuser.hue.groups </ 이름>
<값> * </ 값>
</ 속성>
HUE는 설정 파일을 수정
[[hdfs_clusters]] [[[기본 설정]]]
fs_defaultfs = HDFS : // MyCluster라는
webhdfs_url=http://node1:50070/webhdfs/v1
hadoop_bin=/usr/hadoop-2.5.1/bin
hadoop_conf_dir=/usr/hadoop-2.5.1/etc/hadoop
启动hdfs、重启hue
访问Web
解决方法:
修改默认的hdfs访问用户
修改hue.ini中的配置
default_hdfs_superuser=hdfs
改为
default_hdfs_superuser=root
重启hue
可以通过HUE的 文件浏览器 来操作hdfs的文件,进行增、删、改、查等操作。
但是修改文件内容是出现异常,查看日志文件:
解决方法:
1、 关闭hdfs的权限验证
hdfs-site.xml
<property>
<name>dfs.permissions.enabled</name>
<value>false</value>
</property>
需要重启hdfs和hue
2、 在hue中创建root用户,并以root用户登录hue。
Yarn配置
HUE配置文件修改
[[yarn_clusters]] [[[default]]]
resourcemanager_host=node1
resourcemanager_port=8032
submit_to=True
resourcemanager_api_url=http://node1:8088
重启HUE服务
运行workcout程序进行测试
hadoop jar /usr/hadoop-2.5.1/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.5.1.jar wordcount /test/wc/input /out1