CDH 고 가용성 구성 하둡 클러스터 성능

---

---

 

1 HDFS 고 가용성 구성

dfs.namenode.edits.dir (네임 노드 편집 디렉토리) : 로컬 파일 시스템 네임 노드 편집에 디렉토리를 작성합니다. 네임 노드는 데이터 디렉토리에 저장됩니다 지정되지 않았습니다.

dfs.journalnode.edits.dir (JournalNode 편집 디렉토리) : 네임 노드 편집을 저장하는 데 사용되는 로컬 파일 시스템 디렉토리. 디렉토리 위치를 노드 journalnode, 저장 editlog 및 기타 정보를 제공합니다.

               

               

                 

 

                   

 

 

                  

                   

 

 

 

 

 

 

2 YARN 고 가용성 구성

실 HA를 사용하는 경우 때 작업에 실을 실행 하이브 결과, 다음과 같은 오류가 될 수 없습니다

javax.servlet.ServletException :에 의한 재 지정을위한 프록시 서버를 결정할 수 없음

문제 : 리디렉션에 대한 프록시 서버를 확인할 수 없습니다

해결 방법 : 원사, 즉 ResourceManager에 단 하나 개의 마스터 노드를 사용하여 HA, 사실을 안 함, 일반 원사 HA는 여전히 실 작업에 하이브를 실행할 수 있습니다 정상적인 결과를 얻을 수 있지만, 여전히 같은 오류를보고합니다

                   

                   

 

                  

 

 

                    

 

 

현재 운영 환경, 수는 정상 실행의 성공적인 결과에 와서 있지만, 프로그램의 불꽃에 하이브를 수행하는 경우 YARN HA의 (노드 1, 노드 2가 배포 ResourceManager에)입니다

하지만 프로그램은 여전히 ​​오류를 기록한다 : 리디렉션에 대한 프록시 서버를 확인할 수 없습니다 리디렉션 프록시 확인할 수 없습니다.

test_tb에서 *를 선택;

test_tb에서 수 (*)를 선택;

test_tb 값을 삽입 (2 'ushionagisa');