로딩
요청 처리 중입니다...

[하둡][맵리듀스] 성능 측정하고 향상하기, 워드 카운트 예제 분석

 [하둡][맵리듀스] 성능 측정하고 향상하기, 워드 카운트 예제 분석

파이 값 계산해보고 성능 측정하기 (지난 포스팅) https://blog.naver.com/6134aon/223630231280 <- 실행환경 여기서 소스 다운 https://github.com/somang4819/hadoop1 데이터 노드를 추가함. docker-compose.yaml ... datanode2: image: myhadoop:1 ports: - "9865:9865" # DataNode Web UI 포트 command: ["hdfs", "datanode"] env_file: - config ... 데이터 노드는 내 노트북 사양 때문인지 2개까지만 동작하는 것 같았다..ㅜㅜ - config 파일에 추가된 속성 MAPRED-SITE.XML_mapreduce.am.resource.mb=2880 MAPRED-SITE.XML_mapreduce.map.memory.mb=1024 MAPRED-SITE.XML_mapreduce.map.java.opts=-Xmx820m MAPRED-S...