- AWS EC2 의 보안그룹을 편집하고 Hadoop, Yarn, Spark WEB UI를 확인한다.
1. 인바운드 규칙 편집
2. Spark WEB UI 확인 : http://[nn1서버 Public IP]:18080
- 4강에서 /usr/local/spark/conf/worker 편집할때, dn1, dn2, dn3로 지정하여 spark 3개 워커의 주소가 dn1, dn2, dn3의 private ip 주소로 설정되어 있음
- 10강의 예제2 다시 실행후 웹UI확인
3. Yarn WEB UI 확인 : http://[nn1서버 Public IP]:8088
4. Hadoop WEB UI 확인(Active) : http://[nn1서버 Public IP]:50070
- 메뉴 > DataNode
5. Hadoop WEB UI 확인(Standby) : http://[nn2서버 Public IP]:50070
'빅데이터 분석 환경 구축' 카테고리의 다른 글
| 13. 클러스터 실행 스크립트 생성 (0) | 2022.04.25 |
|---|---|
| 12. Hadoop FailOver 테스트 (0) | 2022.04.25 |
| 10. Spark 클러스터 실행 및 PySpark 예제 실행 (0) | 2022.04.25 |
| 09. Hadoop, Yarn 클러스터 실행 (0) | 2022.04.25 |
| 08. Zookeeper 클러스터 실행 (0) | 2022.04.25 |
