[Hadoop] : 하둡 동작 테스트 - Master Server

📌 마스터 서버에서 hadoop 사용자로 해야 한다.

touchz로 0바이트 크기의 파일을 업로드한다.

hadoop fs -touchz /test

hadoop fs -ls /

 

이렇게 나온다.

 

하둡은 시작 완료 되는데 시간이 좀 걸린다 때문에 아래 명령어로 하둡의 데몬이 모두 실행되었는지 확인하고 싶다.

간단한 확인 방법은 하둡의 네임 노드 데몬은 시작 시간이 가장 오래걸리기 때문에 9000 포트가 실행되면 완료인 것을 알 수 있다.

netstat -ntlp | grep java

 

만약 하둡 장애가 발생하면 실행 로그를 봐야한다.

네임노드 로그와 데이터 노드 로그를 보면 된다.

하둡에 사용되는 리소스를 관리하기 위해 하둡 리소스 매니저를 사용하는데 웹 기반으로 동작한다. 아래 포트 번호를 입력해서 접속해 본다.

<http://하둡아이피:8088>

 

아래와 같이 나와야 한다. 만약 접속이 되지 않는다면 방화벽을 해제해 줘야 한다.

https://ohju96.notion.site/Master-Server-87662cb2dcd949fe86526a54c1461e01

하둡 동작 테스트 - Master Server