Cloudera manager 설치

1. 서버들 설정

• 가상머신 3대 생성
  • bigdata-cluster-1, bigdata-cluster-2, bigdata-cluster-3
  • 서버 정보 fqdn 형식으로 /etc/hosts 파일을 통해 공유 및 key 공유
  • 참고:

1. 자바 설치
   1. apt install openjdk-8-jdk
2. 방화벽 해제
   1. ufw disable
3. Cloudera Manager 설치 (정책이 바뀌어서 2달 무료 버전으로 설치)
   1. bigdata-cluster-1 에 설치

$ wget <https://archive.cloudera.com/cm7/7.4.4/cloudera-manager-installer.bin>
$ chmod u+x cloudera-manager-installer.bin
$ sudo ./cloudera-manager-installer.bin

1. DB 접근 권한 변경

	host all cloudera-scm,scm 0.0.0.0/0 reject
	host all cloudera-scm,scm 0.0.0.0/0 md5
	host all all 0.0.0.0/0 trust

1. cloudera manager service 시작

service cloudera-scm-server-db start
service cloudera-scm-server start

1. bigdata-cluster-1:7180 을 통해 접속 및 admin/admin 을 통해 로그인

Cloudera Cluster 생성

1. 클러스터 이름 설정 (기본 : Cluster 1)
2. 서버 식별 (fqdn 서버 이름 활용)
3. 기본설정 및 parcels 를 활용하여 제품 설치(인터넷 연결 환경 필수)
4. jdk 설치는 manually 선택
5. 서버들 ssh 로그인 정보 (password or key 설정)
   1. 계정은 root이 아닌 ubuntu 로
   2. key 나 password는 반드시 입력해주어야 한다(authorized keys 를 통해 인증없이 접속하게 해두었으나 계속 나서 결국 설정을 하나라도 넣어야 통과됨을 확인)
6. 서버들 agent 설치
7. CDH 를 구성하는 Parcel들을 설치