하둡에 대해 공부하던 중 클러스터를 구축해보고 싶었다. 도커 컴포즈에 대해서 찾아보던 중 외국에서 사용되는 코드가 많지만 그 코드 안에 해킹 프로그램이 있을 수도 있다고 생각을 하게 되었다.
그래서 내가 직접 도커 컴포즈를 활용해 하둡 클러스터를 구축해봤다. 코드는 다음과 같다.
여기서 마스터 노드 하나와 슬레이브 노드 2개를 구축했다. 도커 컴포즈 3.x부터는 Link 문구가 없어도 자동으로 연동되긴 하지만 정확하게 사용하고자 link를 작성했다. tty 명령어는 docker 에서 -it 옵션과 동일한 것이다. command에서 test.sh에는 하둡을 실행하는 명령어를 입력해 뒀다.
하둡 실행 시 ssh접속이 필요한데 이부분은 .ssh의 config 파..........
하둡 클러스터 (도커 컴포즈)에 대한 요약내용입니다.
자세한 내용은 아래에 원문링크를 확인해주시기 바랍니다.