Hadoop에서 Maximum Map, Reduce Task 옵션 설정 하기Big Data2013. 2. 8. 10:06
Table of Contents
mapred.map.task.maximum
하나의 태스크 트레이커에서 동시에 수행 할 수 있는 맵 태스크의 개수다.
이 값은 CPU 개수만큼 설정 하거나 적게 설정 해야 한다. (기본값 : 2)
<property>
<name>mapred.tasktracker.map.tasks.maximum</name>
<value>8</value>
</property>
mapred.reduce.tasks.maxiumum
하나의 태스크 트래커에서 동시에 수행 할 수 있는 리듀스 태스크의 개수다.
이 값은 CPU 개수와 I/O 성능에 따라 조절해야 한다.
<property>
<name>mapred.tasktracker.reduce.tasks.maximum</name>
<value>8</value>
</property>
반응형
'Big Data' 카테고리의 다른 글
HDFS 데이터 블럭 balancer 실행 명령어 (0) | 2018.03.27 |
---|---|
Hadoop yarn 모드에서 spark-submit 실행 시 발생 장애 처리 (0) | 2016.05.20 |
Hadoop 에서 DataNode 와 TaskTracker 제거 및 추가하기 (0) | 2013.02.08 |
Hadoop 실행 중인 작업 강제 취소 명령어 (0) | 2012.05.23 |
HDFS Datanode 데몬 복구 명령어 (0) | 2012.05.23 |
@kogun82 :: Ctrl+C&V 로 하는 프로그래밍
Korean BioInformation Center(KOBIC) Korea Research Institute of Bioscience & Biotechnology Address: #52 Eoeun-dong, Yuseong-gu, Deajeon, 305-806, KOREA +82-10-9936-2261 e-mail: kogun82@kribb.re.kr Blog: kogun82.tistory.com Homepage: www.kobic.re.kr
포스팅이 좋았다면 "좋아요❤️" 또는 "구독👍🏻" 해주세요!